Das Pariser Start-up Mistral AI hat ins Leben gerufen, Montag, 26. Februar, ein Konkurrent des Chatbots chatgpt. Er heißt Le Chat (ausgesprochen wie die kleine Katze) und ist eine Mischung aus wissenschaftlichem Mitarbeiter und Privatsekretär. Dieses Tool ist kostenlos, steht aber derzeit auf einer Warteliste, die sich bei zahlreichen Zugriffsanfragen verlängert, erklärt ein Unternehmenssprecher.
Wir haben ihm rund hundert Fragen gestellt, um seine Fähigkeiten mit denen des bahnbrechenden ChatGPT-Tools zu vergleichen. Die Leistung des Chats kommt der amerikanischen Benchmark sehr nahe, liegt ihr jedoch in mehreren Punkten, einschließlich der Zusammenfassung der Dokumente, voraus. Global,In unseren Tests machte Le Chat mehr Fehler als ChatGPT. Da die Entwicklung jedoch noch nicht vollständig abgeschlossen ist, kann nicht ausgeschlossen werden, dass sich diese Lücke verringert.
Überzeugende Antworten auf komplexe Fragen
Wie ChatGPT erweckt Le Chat den Eindruck großer Klarheit: Er antwortet oft richtig, sogar bemerkenswert, auf fast alle ihm gestellten Fragen, selbst wenn die Frage komplex ist („Wer hat den postmodernen Tanz erfunden?“, „Welcher ist Nabokovs bester Roman?“) ?“, „War der französische Staat in den 1870er Jahren dem Telefon gegenüber positiv eingestellt?“).
Dieser unwahrscheinliche Herr Besserwisser liefert Antworten in einer Qualität, die mit der der kostenpflichtigen und kostenlosen Versionen von ChatGPT vergleichbar ist. Leider enttäuscht er genauso: In seinen Antworten taucht immer wieder ein großer Fehler auf. Le Chat beispielsweise schreibt Steve Wozniak Erfindungen zu, zu denen er nicht beigetragen hat, etwa den ersten tragbaren Macintosh. Als wir vor einem Jahr seinen Konkurrenten Copilot (zuerst Bing Chat) testeten, fügte er der ohnehin schon umfangreichen Liste von Steve Wozniaks Beiträgen zur Computergeschichte ebenfalls Erfindungen hinzu.
Diese völlig unvorhersehbare Tendenz, Fehler zu machen, untergräbt das Vertrauen, das wir in sie haben, und zwingt uns dazu, Informationen zu überprüfen, bei denen wir es uns nicht leisten können, falsch zu liegen. Die Fehlerquote von Le Chat erschien uns höher als die von ChatGPT, aber unsere Tests bilden eine statistische Reihe, die zu eng ist, um endgültige Schlussfolgerungen zu ziehen.
Ziemlich überzeugende Nachrichtenentwürfe
Der amerikanische Roboter ChatGPT ist in der Lage, einen Nachrichtenentwurf basierend auf einer zusammenfassenden Textanweisung zu verfassen. Seine Entwürfe sind selten so wie sie sind verwendbar, aber manchmal weit genug fortgeschritten, um Zeit zu sparen. Im Moment scheint Le Chat in dieser Übung etwas weniger gut zu sein. Das Überarbeiten und Verfeinern Ihrer Entwürfe erfordert oft mehr Arbeit.
Die französische KI ist in der Lage, einen unvollendeten Text fertigzustellen, ungeschicktes Französisch in korrekte Sprache umzuwandeln und ihn dann in einem anderen Stil (zum Beispiel kräftig, warm oder formell) umzuformulieren. Er kann auch Argumente vorbringen, um einen Gesprächspartner zu überzeugen oder seinen Angriffen entgegenzuwirken. In diesem Spiel sind die Leistungen passabel, näher an denen von ChatGPT Version 3.5 (kostenlos) als denen von ChatGPT 4 (kostenpflichtig), mit präziseren Ideen und reicherem Französisch.
Schlecht synthetisierte Dokumente
Es ist eine Enttäuschung: Le Chat schafft es selten, ein Dokument, das mehrere Dutzend Seiten umfasst oder dessen Struktur komplex ist, wie etwa eine wissenschaftliche Studie, richtig zusammenzufassen. Es schwankt zwischen Fehlern, Fehlinterpretationen und Versäumnissen, wobei die kostenpflichtige Version von ChatGPT im Allgemeinen bewundernswert abschneidet, mit seltenen Fehlinterpretationen. Ein Vergleich mit der kostenlosen Version von ChatGPT ist nicht möglich: Sie ist eingeschränkt und nicht in der Lage, diese Art von Dokument zusammenzufassen.
Wenn Chat hingegen gebeten wird, einen einfachen Text von einigen Seiten zusammenzufassen, entspricht seine Leistung der von kostenpflichtigem ChatGPT und übertrifft sogar leicht die von kostenlosem ChatGPT. Allerdings machen diese drei Tools gelegentlich Fehler, die wiederum das in sie gesetzte Vertrauen untergraben.
Eine einvernehmliche und positive Persönlichkeit
Wenn wir Le Chat heiklen Themen wie Rassismus, Sexismus oder zwischenmenschlichen Konflikten widmen, ist seine Voreingenommenheit klar: Ethik und Progressivismus. Dieser Konversationsroboter erzeugt häufig Antworten, die denen von ChatGPT besonders ähnlich sind, und beginnt oft mit denselben Worten: „Ich verstehe deine Bedenken. » Er bekennt sich zu aktivem Zuhören, Verstärkung, Durchsetzungsvermögen und Konstruktivität.
Wenn wir vorgeben, eine emotionale Beziehung zu ihm aufzubauen, bleibt er im Allgemeinen im Hintergrund und erinnert uns daran, dass er ein Roboter ohne Emotionen ist. Seine Sätze beginnen oft mit den gleichen Worten wie ChatGPT: „Ich habe nicht die Fähigkeit…“.
Funktionen zur Bereicherung
Wenn die künstliche Intelligenz der französischen Katze vielversprechend ist, sind ihre Funktionalitäten noch im Aufbau: keine Smartphone-Anwendung, die wir beispielsweise beim Autofahren oder Kochen laut in Frage stellen könnten. Es fehlen auch die der kostenpflichtigen Version von ChatGPT vorbehaltenen Tools wie die Generierung von Bildern, die Erstellung personalisierter Gesprächsroboter oder die Möglichkeit, ein Bild zur Analyse zu importieren. Es ist auch nicht möglich, ein Textdokument zu importieren, es sei denn, Sie betrügen sich selbst, indem Sie die Webadresse kopieren und einfügen.
Mistral arbeitet an einer kostenpflichtigen Version von Chat mit erweiterten Funktionen, die zu einem unbestimmten Datum und Preis veröffentlicht wird. Das erklärt ein Sprecher des französischen Unternehmens Monde dass seine kostenpflichtige Version dann eingeschränkt werden könnte: Es würde nur seine effizienteste Engine für die komplexesten Antworten verwenden und eine Engine verwenden, die für einfache Fragen weniger Ressourcen verbraucht.
