„Dies ist ein bedeutender Meilenstein in der Entwicklung der KI und der Beginn einer neuen Ära für uns bei Google“, sagte Demis Hassabis, CEO von Google DeepMind, der KI-Abteilung hinter Gemini.

„Ich bin beeindruckt von dem, wozu es in der Lage ist“, sagte Eli Collins, Vice President of Product bei Google DeepMind, über Gemini.

Aber ist Gemini besser als ChatGPT?

Lass uns genauer hinschauen:

Schauen wir uns zunächst kurz die Zwillinge an.

Collins behauptete, Gemini sei das erste KI-Modell, das menschliche Experten in bestimmten Benchmarks in den Bereichen Problemlösung, Mathematik, Physik, Geschichte, Recht, Medizin und Ethik übertrifft.

Eine Demonstration zeigte, wie Zwillinge erkannten, was gezeigt wurde, von einer Person, die eine „Matrix“-Filmszene nachspielte, bis hin zu jemandem, der eine Ente zeichnete und dann eine Gummiente hochhielt.

Zwillinge kommentierten das Gezeigte, zogen Vergleiche, zogen Schlussfolgerungen und machten Vorschläge.

Google wird den Gemin schrittweise einführen – die „Nano“- und „Pro“-Versionen werden sofort in Googles KI-gestützten Chatbot Bard und sein Pixel 8 Pro-Smartphone integriert.

Nächstes Jahr wird das „Ultra“-Modell von Gemini dann „Bard Advanced“ auf den Markt bringen – eine aufgefrischte Version des Chatbots, die zunächst nur einem Testpublikum angeboten wird.

Die KI wird zunächst nur auf Englisch auf der ganzen Welt funktionieren, obwohl Google-Führungskräfte den Reportern während eines Briefings versicherten, dass die Technologie später kein Problem damit haben wird, in andere Sprachen zu diversifizieren.

Gemini wird irgendwann auch in die dominierende Suchmaschine von Google integriert, obwohl der Zeitpunkt dieses Übergangs noch nicht genau bekannt ist.

Laut Bard-Vizepräsidentin Sissie Hsiao hat Google Anfang des Jahres seinen eigenen Bard-Chatbot auf den Markt gebracht und den Chatbot basierend auf dem Feedback der Leute kontinuierlich aktualisiert.

„All diese schnellen Innovationen führen uns zu einem unserer Meinung nach wirklich transformativen Moment“, sagte Hsiao während des Briefings.

„Mit Gemini erhält Bard sein bisher größtes Upgrade.“

Bard wird Gemini für fortgeschrittenere Argumentations-, Planungs- und Verständnisfähigkeiten nutzen, wie eine Demonstration zeigte.

Der von Zwillingen geprägte Bard wird so erweitert, dass er „multimodal“ ist, was bedeutet, dass er mit akustischen und visuellen Eingaben sowie Textaufforderungen arbeiten kann, sagten Führungskräfte.

„Mit Gemini sind wir unserer Vision, Ihnen den besten KI-Kollaborateur der Welt zu bieten, einen Schritt näher gekommen“, sagte Hsiao.

Gemini steigert laut Hsiao die Qualität von Bards Leistung, sei es beim Schreiben von Gedichten oder Computercode für Einkaufsanfragen oder Forschungsprojekte.

Ist es besser als ChatGPT?

Die Benchmarks würden das sicherlich vermuten lassen.

Die Benchmark-Zahlen von Google Gemini ZERSTÖREN GPT-4 absolut!!!!

Wir haben einen Krieg vor uns. pic.twitter.com/AJ1meXVqSq

– Deedy (@debarghya_das) 6. Dezember 2023

Während Google es ablehnte, die Parameteranzahl von Gemini zu teilen – ein, aber nicht das einzige Maß für die Komplexität eines Modells – Collins behauptete, dass die Leistung der „Ultra“-Version von Gemini die anderer hochmoderner Modelle in 30 Benchmark-Tests zur Messung von Fähigkeiten wie Bildverständnis oder mathematischem Denken „weit übertrifft“.

Aber es gibt eine Einschränkung.

Ein Stück rein tech.co wies darauf hin, dass Google sagte, dass nur die „Ultra“-Version von Gemini ChatGPT schlagen kann.

Tatsächlich wurde in einem am Mittwoch veröffentlichten Whitepaper die leistungsstärkste Version von Gemini beschrieben, die GPT-4 bei Multiple-Choice-Prüfungen, Grundschulmathematik und anderen Benchmarks übertrifft.

Es wurde jedoch anerkannt, dass es weiterhin Probleme gibt, KI-Modelle dazu zu bringen, höhere Denkfähigkeiten zu erlangen.

Unterdessen tauchen die alten Probleme weiterhin auf.

Nilay Patel herein Der VergEr schrieb, dass er „dem neuen Gemini-basierten Google Bard eine wichtige Frage gestellt hat und dieser selbstbewusst ein Vergecast-Interview halluzinierte, das nicht mit einem Link existiert.“

In Der AtlantikMatteo Wong schrieb, dass Gemini GPT-4 zwar „in den meisten Parametern“ schlagen kann, dies jedoch nur ein „iterativer Fortschritt“ sei.

Übersetzung? Zwillinge sind für die Menschheit kein großer Schritt – noch nicht.

Außerdem hat OpenAI ein Ass im Ärmel.

„Wir befinden uns in einer Art Wettrüsten“, sagte Oren Etzioni, emeritierter Professor an der University of Washington und ehemaliger CEO des Allen Institute for AI Verdrahtet. „Es gibt keinen Grund, daran zu zweifeln, dass Gemini bei diesen Benchmarks besser abschneidet als GPT-4, aber die nächste Version, GPT-5, wird besser abschneiden.“

„Dies ist ein Krieg, in dem man keine Gefangenen machen und den man gewinnen muss“, fügte Etzioni hinzu.

„Wir wissen nicht wirklich, was drin ist“

Einige Informatiker sehen jedoch Grenzen darin, wie viel mit großen Sprachmodellen erreicht werden kann, die auf der wiederholten Vorhersage des nächsten Wortes in einem Satz basieren und dazu neigen, Fehler zu erfinden, die als Halluzinationen bezeichnet werden.

„Wir haben mit Gemini große Fortschritte in der sogenannten Faktizität gemacht. Gemini ist in dieser Hinsicht also unser bestes Modell. Aber ich würde sagen, es ist immer noch ein ungelöstes Forschungsproblem“, sagte Collins.

Das Durchhaltevermögen generativer KI-Chatbots muss noch bestätigt werden, wenn die anfängliche Aufregung nachgelassen hat.

Darüber hinaus hatte die Integration des OpenAI-basierten Chatbots in die Suchmaschine von Microsoft Anfang des Jahres keinen Einfluss auf die überwältigende Dominanz von Google bei der Suche.

Regierungen und Technologieunternehmen bestehen jedoch darauf, dass generative KI das nächste große Kapitel der Technologie ist, und haben die Ausgaben für neue Produkte, Forschung und Infrastruktur erhöht.

„Das ist das Problem bei all diesen proprietären Modellen“, sagte Alexei Efros, Professor an der UC Berkeley Verdrahtet. „Wir wissen nicht wirklich, was drin ist.“

Mit Inputs von Agenturen