Er kann E-Mails und Geschichten schreiben, Witze erzählen und interessante Gespräche führen – aber wie gut kann chatgpt Probleme lösen?
Laut einer neuen Studie kann das Sprachmodell von OpenAI Probleme genauso gut lösen wie ein Bachelor-Student, manchmal sogar etwas besser.
Forscher der University of California in Los Angeles stellten GPT-3-Fragen und -Probleme, die häufig bei Intelligenztests wie dem SAT auftauchen, einer Prüfung, die amerikanische High-School-Studenten vor dem College-Eintritt ablegen. .
Die gleichen Probleme wurden 40 Studenten im Grundstudium gestellt.
In einem Test mussten Schüler und GPT-3 die nächste Form in einer Reihe von Formen vorhersagen. Die Ergebnisse zeigten, dass der GPT-3 80 % der Probleme richtig löste, während die durchschnittliche Schülerpunktzahl bei knapp 60 % lag.
In einem anderen Test forderten die Forscher die Teilnehmer auf, zwei Textteile mit derselben Bedeutung zuzuordnen. Die Schüler schnitten bei diesem Problem besser ab als GPT-3, obwohl GPT-4 – eine fortgeschrittenere Version von ChatGPT – besser abschnitt als GPT-3.
Die Studie wurde veröffentlicht in Natur menschliches Verhalten.
Taylor Webb, einer der Forscher, sagte dem Wächter Man kann zwar nicht sagen, dass ChatGPT über die gesamte Intelligenz eines Menschen verfügt, es hat sich jedoch in vielen Bereichen verbessert.
Er erklärte, dass ChatGPT immer noch Probleme in Bereichen wie sozialer Interaktion, mathematischem Denken und der Lösung bestimmter Arten von Problemen hat, beispielsweise bei der Entscheidung, wie man Süßigkeiten am besten von einer Schüssel in eine andere bewegt.
Aber denkt ChatGPT wie ein Mensch oder weist es eine neue Art von Intelligenz auf?
Die Forscher sind sich nicht sicher – und sie sagten, sie könnten es nicht sein, ohne sich anzusehen, wie die KI hergestellt wurde und wie sie funktioniert.
Sie fügten jedoch hinzu, dass sie es gerne wissen würden.