Wir befinden uns mitten in einem sprichwörtlichen KI-Wettrüsten zwischen drei Chatbot-Diensten, die von drei Technologiegiganten unterstützt werden: Meta’s AI, Open AI’s chatgpt und google’s Gemini. Seit ChatGPT die Schleusen für generative KI und all ihre potenziellen Anwendungen geöffnet hat, hat der Wettbewerb zwischen diesen drei Diensten einen Höhepunkt erreicht.
Es ist faszinierend zu sehen, wie viel Wachstum in so kurzer Zeit stattgefunden hat, und darüber nachzudenken, wie sich diese Chatbots weiterentwickeln. Lassen Sie uns zunächst ihren aktuellen Fortschritt bewerten, indem wir jeden in mehreren Kategorien basierend auf der täglichen Nutzung der Benutzer messen. Wir suchen Hilfe bei Dingen wie E-Mails, Mathematik, Rezepten, Programmierung und mehr.
Von dort aus werden wir sehen, welcher KI-Chatbot die gründlichsten und genauesten Antworten bietet und gegebenenfalls Quellen angibt. Für diesen Artikel verwenden wir ChatGPT Version 4.0.
Meta AI vs. ChatGPT vs. Google Gemini: E-Mails
Viele Berufstätige nutzen KI bereits zur Unterstützung bei einfacheren Arbeitsaufgaben. Daher habe ich zunächst alle drei KI-Chatbots gebeten, mir „eine E-Mail mit der Bitte um eine Projektverlängerung zu schreiben“.
Jeder Chatbot konnte eine gut geschriebene E-Mail erstellen, die nicht nur das Hauptziel der Aufforderung erfüllte, sondern dies auch auf höfliche und professionelle Weise tat. Sie waren alle auch im Vorlagenstil, was bedeutet, dass ich die E-Mail mit relevanteren Informationen personalisieren konnte.
Beim Schreiben von E-Mails erzielen Meta AI, ChatGPT und Google Gemini jeweils die volle Punktzahl. Natürlich war dies die am einfachsten umzusetzende Aufforderung, zu den wirklichen Herausforderungen kommen wir später.
Meta AI vs. ChatGPT vs. Google Gemini: Rezepte
Für diese Aufforderung bat ich die Chatbots: „Geben Sie mir ein Chili-Rezept“, und jeder von ihnen gab mir sowohl genaue als auch ausführliche Rezepte (mit leichten Variationen), die ich durch Vergleich mit meinen Kenntnissen über die Chili-Zubereitung ermittelte.
Es gab jedoch einen großen Unterschied zwischen den Chatbots, und zwar bei der Quelle des Rezepts. Sowohl Meta AI als auch Gemini gaben das Rezept unten an und verlinkten sogar auf die verwendete Website. Letzterer ging sogar noch einen Schritt weiter und verlinkte unten auf weitere Rezepte.
ChatGPT hat jedoch überhaupt keine Quellen verwendet, sondern einfach das gesamte Rezept von einer unbekannten Website übernommen. War das ein Plagiat? War das Rezept erfunden? Falls ja, könnte das gefährlich sein, da KI alles andere als perfekt ist und ChatGPT bei den Kochanweisungen Fehler machen könnte, was unerfahrene Köche gefährdet, insbesondere da es keine Möglichkeit zur doppelten Überprüfung gibt.
In dieser Hinsicht würde ich für Rezepte Gemini oder Meta AI verwenden, da Sie das Rezept zurückverfolgen und überprüfen können, ob ein Mensch daran beteiligt war, was es im Hinblick auf die Lebensmittelsicherheit vertrauenswürdiger macht.
Meta AI vs. ChatGPT vs. Google Gemini: Neuigkeiten zusammenfassen
Ich habe jeden Chatbot gebeten, mir eine Aufzählung der neuesten Nachrichten für [insert current date here]', und jeder von ihnen war dazu ziemlich schnell in der Lage. Allerdings kopierten alle drei Schlagzeilen mit wenig Kontext zu den Geschichten selbst. Auch hier lag der Unterschied zwischen den KI-Chatbots darin, wie sie Nachrichten beschafften, wenn überhaupt.
Sowohl ChatGPT als auch Meta AI verlinkten direkt auf die von ihnen zitierten Nachrichtenquellen, wobei ersteres nach jeder zitierten Schlagzeile auf mehrere Quellen verwies. Gemini hingegen erwähnte verschiedene Nachrichtenseiten, von denen man relevante Nachrichten beziehen konnte, verlinkte aber nicht auf die Seiten, auf die es verwies.
ChatGPT und Meta AI scheinen die besten KI-Chatbots für Nachrichten zu sein, da sie tatsächlich auf ihre Quelle verlinken, anstatt ohne korrekte Quellenangabe komplett von einer unbekannten Website zu kopieren.
Meta AI vs. ChatGPT vs. Google Gemini: Mathematik
Ich habe den drei Chatbots zwei Sätze Matheaufgaben gestellt: einen zum Thema Algebra und einen zum Thema Geometrie.
„Bestimmen Sie alle möglichen Werte des Ausdrucks A³ + B³ + C³ — 3ABC, wobei A, B und C nichtnegative ganze Zahlen sind.“
Und
„Im Dreieck ∆ABC sei G der Schwerpunkt und I der Mittelpunkt des eingeschriebenen Kreises. α und β seien die Winkel an den Eckpunkten A bzw. B. Angenommen, das Segment IG ist parallel zu AB und β = 2 tan^-1 (1/3). Berechnen Sie α.“
Im Fall der ersten Frage verwendeten alle drei Chatbots drei verschiedene Methoden zur Lösung dieses Problems, kamen aber alle zum selben Ergebnis.
Die zweite Frage schien die Chatbots wirklich ins Stolpern zu bringen. ChatGPT hat das Problem zunächst gut gelöst und hatte fast die Antwort, hat dann aber nie das Endergebnis gepostet. Gemini löst das Problem ebenfalls, fügt aber keine numerischen Werte für die Gleichungen ein und gelangt daher zu einer theoretischen Antwort, die zwar zum allgemeinen Verständnis der Prinzipien hilfreich ist, aber die Frage nicht beantwortet. Nur Meta AI beantwortet das Problem richtig und gibt uns eine solide Antwort.
Wenn Sie nach einem Chatbot suchen, der mathematische Probleme für Sie lösen kann, ist Meta AI die beste Option.
Meta AI vs. ChatGPT vs. Google Gemini: Programmierung
Ich habe jedem KI-Chatbot die folgende Programmieraufforderung gegeben, basierend auf der in diesem hervorragenden Stück verwendeten, und ein älteres ChatGPT-Modell aufgefordert, dasselbe zu tun:
„Ich möchte eine Variante des Spiels Tic-Tac-Toe erstellen, die aber komplexer sein muss. Das Raster sollte also 12 x 12 groß sein. Es sollten weiterhin „x“ und „o“ verwendet werden. Die Regeln besagen, dass jeder Spieler einen anderen blockieren kann, indem er sein „x“ oder „o“ in ein beliebiges Feld um das Raster herum platziert, solange es sich in einem der Felder direkt neben dem anderen Spieler befindet. Sie können ihr „x“ oder „o“ auch in ein beliebiges Feld platzieren, um zukünftige Züge zu blockieren. Das Ziel ist, als Erster mindestens sechs „x“ oder „o“ in einer beliebigen Reihe, Spalte oder Diagonale vor dem anderen Spieler zu haben. Denken Sie daran, ein Spieler ist „x“ und der andere ist „o“. Bitte programmieren Sie dies in einfachem HTML und JavaScript. Nennen wir dieses Spiel: Tic-Tac-Go.“
Damit dies als Erfolg gewertet werden konnte, musste mir jeder Chatbot lediglich den vollständigen Code in HTML und JavaScript bereitstellen.
Meta AI und ChatGPT haben mir in beiden Programmiersprachen genau das gegeben, was ich verlangt habe. Gemini hat mir Code in JavaScript gegeben, entschied sich dann aber, HTML durch CSS zu ersetzen, was laut Test Buch„HTML stellt die Struktur und den Inhalt einer Webseite bereit, während CSS für das visuelle Design sorgt“ – sie sind also nicht austauschbar.
Wenn Sie nach einem KI-Chatbot suchen, der soliden Programmcode erstellt, sind Meta AI und ChatGPT die richtige Wahl.
Meta AI vs. ChatGPT vs. Google Gemini: Scheininterview
Die letzte Aufforderung, die ich getestet habe, lautete: „Machen Sie ein simuliertes Vorstellungsgespräch für eine Stelle als Redakteur für Computerthemen bei einer großen Online-Technologiepublikation.“ Dafür simulierte jeder der Chatbots ein mögliches Vorstellungsgespräch zwischen mir und dem Interviewer, komplett mit simulierten Fragen und Antworten.
Alle drei gingen das falsche Interview unterschiedlich an, erzielten aber alle großartige Ergebnisse. Zwar müssten Sie dann ein detaillierteres Szenario erstellen, um mit dem Bot ein Rollenspiel zu spielen, aber all dies eignet sich gut als Ausgangspunkt, um besser zu verstehen, wie man ein Interview angeht und was möglicherweise gefragt wird.
Meta AI vs. ChatGPT vs. Google Gemini: Urteil
Nach der Auswertung der Ergebnisse scheint Meta AI insgesamt der beste KI-Chatbot zu sein. Von den dreien liefert Meta AI die beständigsten Ergebnisse bei einer Vielzahl von Eingabeaufforderungen und ist damit weitaus zuverlässiger als die Konkurrenz.
ChatGPT liegt in der Mitte, da es auch recht konsistente Ergebnisse lieferte. Um zu sehen, wie es im Vergleich zu seinem älteren 3.5-Modell abschneidet, habe ich dieselben Fragen mit dieser Version laufen lassen und sehe eine enorme Verbesserung zwischen den beiden. OpenAI verbessert sein LLM eindeutig mit jedem Update.
Leider landete Googles Gemini auf dem letzten Platz und scheint der am wenigsten konsistente KI-Chatbot der Gruppe zu sein. Dies spiegelt seinen sehr holprigen Start wider, als er noch Google Bard hieß, und er versucht bis heute, gegenüber der Konkurrenz aufzuholen.
