Google hat seinem Bard-Chatbot kürzlich eine umfassende Überarbeitung in Form eines Upgrades auf das neue große Sprachmodell Gemini Pro verpasst. Laut Google stellt Gemini einen bedeutenden Fortschritt dar und die aktuelle Gemini Pro-Variante ist deutlich fortschrittlicher als GPT-3.5. Nachdem ich in den letzten Wochen regelmäßig chatgpt und Bard nebeneinander für die gleichen Anfragen verwendet habe, habe ich ein ziemlich klares Bild davon gewonnen, wie sich die beiden LLMs unterscheiden.

Während ich noch an meinem vollständigen Vergleich zwischen Bard und ChatGPT arbeite, gibt es einige Bereiche, in denen Bard besser strahlt. Es stellt sich heraus, dass die Reiseplanung eines dieser Dinge ist.

Meine fiktive Reise nach Portland, Oregon

Deshalb habe ich jeden LLM gebeten, mir bei der Planung einer Reise nach Portland, Oregon im Juli zu helfen. Die Realität ist, dass nicht jeder versteht, wie wichtig Klarheit und Spezifität bei der Verwendung dieser Modelle sind, daher habe ich beschlossen, dies mit vagen Details nachzubilden. Zuerst sagte ich nur, dass ich im Juli nach Portland, Oregon und in die Umgebung reisen wollte.

Nachdem mir jedes Modell Vorschläge gemacht hatte, „wurde mir klar“, dass ich dem Ganzen mehr Kontext geben musste, zum Beispiel die Tatsache, dass ich drei Kinder habe und sie auch gerne ein paar lustige Aktivitäten machen würden. Von da an stellte ich weitere Fragen, zum Beispiel, welche Festivals stattfanden. Da es mir mehr verriet, bat ich jedes Model, diese neuen Aktivitäten in den Zeitplan aufzunehmen.

Denken Sie daran, dass, obwohl ich versuchte, die gleichen Fragen zu stellen, die einzelnen LLMs oft so reagierten, dass ich weitere Fragen stellen musste. Obwohl ich den gleichen allgemeinen Prozess verwendet habe, gab es bei einigen Eingabeaufforderungen einige Unterschiede.

Wie viele Fragen waren nötig, um eine Antwort zu finden, die meinen Wünschen entsprach und auf meine Familie zugeschnitten war? Seventeen für ChatGPT und elf für Bard. Bard war nicht nur schneller; Die Ergebnisse gefielen mir etwas besser.

Natürlich war Bard nicht perfekt. Beginnen wir mit dem negativen Faktor: Es fielen immer wieder die Hälfte der Antworten weg. Ich habe es gebeten, die Reise in acht Tagen zu schaffen, und beim ersten Versuch hat es nur sechs Tage vollständig ausgefüllt, und der siebte hat gerade erst angefangen. Nachdem ich darum gebeten hatte, neue Hotspots zur Agenda hinzuzufügen, bat ich um eine neue Version und jedes Mal schnitt Bard ab. Ich kann mir vorstellen, dass es eine Zeichenbeschränkung geben muss, gegen die ich stoße. Die gute Nachricht ist, dass Sie ihn einfach bitten können, den Rest in einer Folgeantwort auszufüllen, das ist also keine große Sache.

Was gefällt mir daran? Es gab ein paar Dinge.

Abgesehen von der schnellen Beantwortung meiner Frage hatte Bard viele positive Aspekte:

• Ich hatte das Gefühl, dass es meine Vorschläge besser integrieren konnte und ein von Menschen kuratierteres Erlebnis bot, als es ChatGPT ohne zusätzliche Aufforderungen bieten konnte.
• Bard „erinnert“ sich konsistenter daran, was Sie zuvor gefragt haben, während ChatGPT mich oft zum Einlesen von Dingen aufforderte, nach denen ich in vorherigen Schritten gefragt hatte.
• Die Einbeziehung von Miniaturansichten durch Bard ist eine nette Geste, da sie Ihnen hilft, eine bessere Vorstellung davon zu bekommen, worum es geht.

Um besser zu veranschaulichen, wie jeder mit der Integration meiner Vorschläge umgeht, habe ich beiden Chatbots gesagt, dass meine Kinder 7, 10 und 14 Jahre alt seien und dass ich Aktivitäten einbeziehen möchte, die für alle Altersgruppen geeignet sind.

ChatGPT seinerseits beinhaltete zwar familienfreundliche Aktivitäten, aber ich hatte das Gefühl, dass Bard es viel besser schaffte, die Last über die Woche zu verteilen. Es fühlte sich gemütlich an, aber nie zu voll. Aber was mich wirklich umgehauen hat, ist, dass Bard nicht nur an meine Kinder gedacht hat; Es wurden sogar ausdrücklich Aktivitäten erwähnt, die jedem Alter gefallen könnten. Sie können im Bild direkt unten sehen, was ich meine.

Lassen Sie uns auf die Erfahrungen eingehen, die ich mit ChatGPT bzw. Bard gemacht habe, um besser zu veranschaulichen, wie unterschiedlich die LLMs mit der Aktivität umgehen. Notiz: Ich werde nicht jeden Schritt durchgehen, sondern Ihnen das Wesentliche erläutern.

Ich verwende ChatGPT zur Erstellung meiner Reiseroute

Lassen Sie uns den Prozess mit ChatGPT durchgehen. Bei der ersten Frage habe ich sie gestellt, um „mir bei der Planung einer Reise im Juli in die Gegend von Portland, Oregon, zu helfen.“ Ich möchte mich sowohl auf Aktivitäten in der Stadt als auch auf die Umgebung konzentrieren.“ Es antwortete mit einer Liste, die in Morgen, Mittagessen, Nachmittag, Abendessen und Abend unterteilt war. Es enthielt grundlegende Beschreibungen und einen eher führerähnlichen Stil. Das einzige Problem? Es wurden nur drei Tage Aktivitäten durchgeführt, obwohl behauptet wurde, dass es sich um eine siebentägige Reise handelte.

Ich habe darum gebeten, das Problem zu beheben. Dann fragte ich nach Aktivitäten für Kinder, mit der gleichen Aufforderung, die ich auch bei Bard verwenden würde. Es gab mir Vorschläge und dann bat ich darum, das Kindermuseum und den Oregon Zoo in den Zeitplan aufzunehmen.

Das Ergebnis war eine schöne Mischung an Aktivitäten, aber es war extrem überfüllt. Ich habe darum gebeten, dass es nachlässt und die Dinge stattdessen auf acht Tage verteilt werden.

Zu dieser Zeit beschloss ich, über Festivals nachzudenken. „Gibt es im Juli irgendwelche Festivals, die einen Besuch wert wären?“ Es gab mir einige Optionen und ich entschied mich für die Reise vom 1. bis 8. Juli. Ich habe es gebeten, das alles in den Zeitplan aufzunehmen, und es hat mir einen neuen Zeitplan gegeben, aber dieses Mal wurden die Beschreibungen vollständig weggelassen.

„Können Sie mir weitere Informationen zu den Programmpunkten geben?“ Ich fragte. Es antwortete mit einer Liste mit Informationen, und ich musste es anweisen, diese in meinen Zeitplan zu integrieren. Von da an habe ich darum gebeten, das Erlebnis persönlicher zu gestalten, um zu sehen, ob es den gleichen Stil und das gleiche Niveau bieten kann, das ich mit Bard erlebt habe.

Es bot mir eine ziemlich naheliegende Alternative. Leider musste ich am selben Tag auch den Zoo und das Museum besuchen. Bevor ich das Problem beheben konnte, ist mir ein weiterer Fehler aufgefallen. Obwohl ich mitgeteilt habe, dass ich die Reise in der Woche vom 4. Juli antreten würde, waren keine lokalen Aktivitäten vorgesehen!

Ich habe es darum gebeten, dieses Problem zu lösen, und es hat mir ein neues Formular gegeben, aber es hatte Tag 4 (4. Juli) und Unabhängigkeitstag als zwei Einträge mit unterschiedlichen Aktivitäten. Auf keinen Fall werde ich zu irgendeinem Wasserfall außerhalb von Portland gehen und noch am selben Tag zu den Feierlichkeiten zurückkommen! Also habe ich das als nächstes behoben. Es hat mir einen neuen Zeitplan ausgespuckt, aber die Beschreibungen entfernt und zum vagen Format zurückgekehrt.

Ich erinnerte es mit personalisierten Beschreibungen daran, dass ich dies wollte, und schließlich gab es mir eine andere Version. Dann fiel mir ein, dass ich den Fehler am Zoo- und Museumstag beheben musste. Ich habe es angesprochen und es hieß, es sei „behoben“, aber es hat sich im wahrsten Sinne des Wortes nichts geändert. Ich erwähnte es noch einmal und entschuldigte mich. Diesmal wurde der Zoo komplett aus dem Programm gestrichen.

Ich habe darum gebeten, es wieder hinzuzufügen und sicherzustellen, dass es an einem anderen Tag als dem Museum stattfindet. Es ergab wieder das gleiche Ergebnis, obwohl der Zoo immer noch fehlte. Ich habe ein letztes Mal darum gebeten, den Zoo als weiteren Tag hinzuzufügen. Erfolg!

Wie Sie sehen, konnte ich ChatGPT dazu bringen, das zu tun, was ich wollte, aber es erforderte mehr Arbeit, um dorthin zu gelangen.

Ich verwende Bard für die Erstellung meiner Reiseroute

Meine Erfahrung mit Bard begann genauso wie die mit ChatGPT. „Helfen Sie mir, im Juli eine Reise in die Gegend von Portland, Oregon, zu planen. Ich möchte mich sowohl auf Aktivitäten in der Stadt als auch auf die Umgebung konzentrieren.“ Mir wurde sofort mitgeteilt, dass dies eine tolle Zeit im Jahr für einen Besuch sei. Das Wetter ist schön, es gibt Sommerveranstaltungen und so weiter. Das fühlte sich viel wärmer und persönlicher an als das, was ChatGPT standardmäßig erzeugt.

Ich habe die Liste durchgesehen und festgestellt, dass es keine Aktivitäten für Kinder gab. Zugegeben, ich habe nicht danach gefragt, aber die Realität ist, dass die meisten echten KI-Gespräche so beginnen: Jemand stellt eine vage Frage, bekommt eine knappe Antwort und fragt dann etwas Ausführlicheres. Ich wollte sehen, wie jeder LLM mit diesem Prozess umgeht. Also erzählte ich es von meinen Kindern und ihrem Alter. Zuerst bot es mir nur Aktivitäten für Kinder in der Gegend an, aber ich bat darum, Dinge in den Zeitplan aufzunehmen.

Es hat so wunderbar funktioniert. Nachdem ich den Zeitplan durchgesehen hatte, stellte ich fest, dass er etwas voll war, und bat darum, weitere erholsame Aktivitäten und Pausen hinzuzufügen. Mit einer Ausnahme hat es diese Aufgabe gut gemeistert; es schnitt Tag 7 ab. Das hatte wahrscheinlich mit der Zeichenbeschränkung der KI zu tun und ließ sich leicht beheben, indem man sie einfach nach dem Rest fragte.

Endlich hatte ich einen soliden Zeitplan, aber mir wurde klar, dass ich darüber nachdenken sollte, dies um den 4. herum zu tun und lokale Veranstaltungen einzubeziehen. Ich habe gefragt, welche Festivals im Juli stattfinden; Darin ging es unter anderem um die Ereignisse am 4. Juli in Oregon. Ich habe dann gesagt, dass der Zeitplan vom 1. bis 8. Juli laufen und die Feierlichkeiten zum Unabhängigkeitstag hinzugefügt werden soll.

Die letzten beiden Tage wurden erneut nicht ausgefüllt. Ich habe mehr davon verlangt und es gab mir nur sehr wenige Aktivitäten zur Auswahl. Mir wurde schnell klar, dass ich die meisten Möglichkeiten ausgeschöpft hatte, die für Kinder aller Altersgruppen familienfreundlich wären. Dies hat mir geholfen, einen Tag zu sparen, da ich die Reise letztendlich auf nur 7 Tage verkürzt habe.

Abgesehen davon, dass ich am letzten Tag oder so nachfragen musste, hatte Bard endlich das Ergebnis, das ich gesucht hatte. Von da an führte ich einen Faktencheck und ein paar andere Dinge durch. Wäre das ein richtiger Urlaub gewesen, hätte ich immer noch etwas manuelle Arbeit und Planung leisten müssen, aber das hätte mir eine Menge Zeit gespart.

Eigentlich ja, ChatGPT hat die Genauigkeit auf seiner Seite. Da die Vorschläge nicht so spezifisch waren, war es in der Lage, ein Erlebnis zu bieten, das meiner Überprüfung der Fakten vollkommen standhielt. Die Orte, die angeblich besucht werden sollten, existieren und liegen auch in angemessener Entfernung von Portland.

Google Bard neigt dazu, bei meinen Interaktionen häufiger Dinge zu erfinden, und auch die Reiseplanung war davon nicht verschont. Es sagte mir, ich solle einen von zwei Orten zum Kaffeetrinken besuchen: Proud Coffee oder Coffeehouse Northwest. Soweit ich weiß, sollte die erste Option das Proud Mary Cafe sein, während die andere dauerhaft geschlossen ist. Das war nicht der einzige Fall. An einer Stelle hieß es Hawthorne Avenue statt Boulevard oder District.

Das ist zwar keine erfundene Sache, hat aber auch zwei Outdoor-Events an einem Tag zusammengepackt. Das hätte mir nichts ausgemacht, aber sie liegen drei Stunden auseinander, und trotzdem soll ich von dort rechtzeitig zum Schlafengehen zurück in die Stadt kommen? Die gute Nachricht ist, dass ich diesen Zeitplan jederzeit problemlos manuell anpassen könnte, wenn es sich um einen echten Urlaubsplan handeln würde. Beispielsweise habe ich den Film ursprünglich auf sieben Tage gekürzt, sodass ich diesen Tag problemlos hinzufügen und den Tag, an dem ich die Stadtgrenzen verlasse, in einen Zweiteiler verwandeln kann. Ich könnte zwischen den beiden Tagen eine Hütte oder so etwas mieten.

Insgesamt würde ich wahrscheinlich beide KI-Tools auf einer echten Reise nutzen. Sie handhaben den Prozess unterschiedlich und liefern unterschiedliche Ergebnisse, die ich dann manuell zu einem perfekten Zeitplan kombinieren konnte. Meiner Meinung nach führt die Durchführung derselben Anfragen über beide Tools mit größerer Wahrscheinlichkeit zu den besten Ergebnissen.

Natürlich werden die meisten von Ihnen das nicht tun. Für diejenigen, die nur eine kurze Liste mit Vorschlägen wünschen und mehr manuelle Interaktion bevorzugen, kann ChatGPT dies gut und ohne eklatante Fehler bewältigen. Für diejenigen, denen die Überprüfung der Fakten nichts ausmacht, die aber eine detailliertere Reiseroute wünschen, die sich eher von Menschen kuratiert anfühlt? Bard ist großartig, aber denken Sie daran, dass Sie den Vorschlägen, die es ausspuckt, nicht unbedingt vertrauen sollten.

Im obigen Beispiel habe ich das natürlich nur mit einem Urlaub vollständig gemacht. Um das Ganze etwas fairer zu gestalten, habe ich schnell noch ein paar andere einfache Ausflüge gemacht. In fast allen Fällen stellte ich fest, dass ChatGPT etwas mehr manuelle Interaktion erforderte, um an das gewünschte Ziel zu gelangen, und stellte fest, dass meine allgemeinen Eindrücke immer noch Bard begünstigten.

Schließlich denken Sie vielleicht, dass ich mit meinen Eingabeaufforderungen präziser und klarer hätte vorgehen und mit ChatGPT viel bessere Ergebnisse erzielen können. Das ist wahrscheinlich wahr, aber auch irgendwie der Punkt. Die meisten Benutzer denken nicht über ihre Eingabeaufforderungen nach, daher liegt der Vorteil beim LLM, der diese Eingabeaufforderungen von geringerer Qualität besser versteht. Letztendlich ist Bard für den durchschnittlichen Benutzer einfacher für die Reiseplanung zu verwenden, auch wenn Sie mit den richtigen Eingabeaufforderungen nahezu die gleichen Ergebnisse erzielen können.