Die Studie wurde von Dr. Erik Guzik, klinischer Assistenzprofessor am College of Business der University of Montana, geleitet. Er und seine Partner verwendeten die Torrance Tests of Creative Thinking (TTCT), ein bekanntes Instrument, das seit Jahrzehnten zur Beurteilung der menschlichen Kreativität eingesetzt wird. Die Forscher sammelten Antworten von ChatGPT und GPT-4 sowie Antworten einer Kontrollgruppe von 24 Studenten der University of Montana, die an Guziks Kursen in Unternehmertum und persönlichen Finanzen teilnahmen. Das Team sagt, die Ergebnisse hätten verblüffende Details über den Grad der „Kreativität“ der KI enthüllt.

Die Antworten von ChatGPT, GPT-4 und den 28 Studenten wurden mit denen von 2.700 Studenten im ganzen Land verglichen, die 2016 an den TTCTs teilgenommen haben. Alle Einsendungen wurden vom Scholastic Testing Service, einem Bildungstestdienst von Earth City mit Sitz in Missouri, USA, bewertet. Den Forschern zufolge war dem Unternehmen nicht bekannt, dass die KI an den Tests teilnahm. Die Ergebnisse machen ChatGPT zur kreativen Elite. Den Forschern zufolge waren die Reaktionen der KI genauso kreativ wie die der kreativsten echten Menschen, die den Test gemacht haben. Berichten zufolge übertraf der KI-Chatbot von OpenAI die Mehrheit der Studenten im ganzen Land.

Bei den TTCTs handelt es sich um zwei unterschiedliche Bewertungen: eine verbale und eine figurative. Beide messen divergentes Denken, also den Denkprozess, der zur Generierung kreativer Ideen genutzt wird. Bei der mündlichen Beurteilung erhalten die Testteilnehmer Bilder und/oder verbale Nachrichten und werden gebeten, schriftlich zu antworten. Man kann ihnen beispielsweise ein Bild eines Ereignisses zeigen und sie bitten, eine Hypothese über den Ausgang aufzustellen. Oder ihnen wird ein Produkt gezeigt und sie werden gebeten, Möglichkeiten zu finden, es zu verbessern. Ihre Antworten werden dann verwendet, um die folgenden drei mentalen Merkmale zu bewerten:

• Lassen Sie die Flüssigkeit stehen : die Anzahl relevanter Ideen;
• l’originalit : die ungewöhnliche Natur von Ideen;
• die Flexibilität : die Vielfalt verschiedener Arten von Ideen.

Beim figurativen Test muss der Kandidat seine Antworten zeichnen. Beispielsweise könnte er gebeten werden, ein Bild fertigzustellen. Neben Fließfähigkeit und Originalität werden beim figurativen Test folgende Fähigkeiten geprüft:

• l’Laboratorium : das Hinzufügen von Ideen, die über das erforderliche Minimum hinausgehen;
• Widerstand gegen vorzeitigen Verschluss : die Fähigkeit einer Person, Unklarheiten so weit zu tolerieren, dass sie eine kreative Antwort finden kann;
• die Abstraktion von Titeln : die Fähigkeit, einer Figur einen kreativen Titel zu geben.

ChatGPT lag im ersten Perzentil für Sprachkompetenz (die Fähigkeit, eine große Anzahl von Ideen zu generieren) und für Originalität (die Fähigkeit, neue Ideen zu entwickeln). Der KI-Chatbot fiel leicht zurück – bis zum 97. Perzentil – bei der Flexibilität, also der Fähigkeit, verschiedene Arten und Kategorien von Ideen zu generieren. Für ChatGPT und GPT-4 haben wir zum ersten Mal gezeigt, dass es in Bezug auf Originalität zu den besten 1 % gehört. Es war ein Novum“, sagte Guzik. Der Professor sagte, er sei erfreut zu sehen, dass einige seiner Studenten an der University of Montana ebenfalls Ergebnisse erzielten, die es ihnen ermöglichten, zu den besten 1 % zu gehören.

Wir haben alle ChatGPT erkundet und festgestellt, dass es einige coole Dinge macht, die wir nicht erwartet hatten. Einige Antworten waren neu und überraschend. Da beschlossen wir, ihn auf die Probe zu stellen, um zu sehen, wie kreativ er war“, sagt Guzik. Der Professor möchte die Auswirkungen, die ChatGPT auf die Wirtschaft haben könnte, nicht überbewerten, geht aber davon aus, dass es zu einem Treiber für Innovationen wird. Guzik testete die KI und ihre Studierenden im Frühjahrssemester. Bei seiner Arbeit wurde er von Christian Gilde von der Montana Western University und Christian Byrge von der Universität Vilnius unterstützt.

Die Forscher präsentierten ihre Arbeit im Mai auf der Southern Oregon University Creativity Conference. Während der Konferenz achteten wir darauf, die Daten nicht zu überinterpretieren. Wir begnügten uns mit der Präsentation der Ergebnisse. Wir haben jedoch starke Beweise dafür vorgelegt, dass KI offenbar eine kreative Fähigkeit entwickelt, die der des Menschen entspricht oder diese sogar übersteigt“, sagte Guzik. Skeptiker sagen jedoch, dass die KI nichts Originelles erschaffen kann, weil sie nur den Inhalt ihrer Trainingsdatenbank wiedergibt. Sie weisen darauf hin, dass die TTCTs dazu dienen, die Kreativität von Kindern zu beurteilen.

Obwohl die TTCTs zur Beurteilung der Kreativität von Kindern konzipiert waren, heißt es in dem Artikel, dass die Leistung von ChatGPT mit der von Schülern und nicht von Kindern verglichen wurde. Andere Kritiker stellten den Begriff der „Kreativität“, wie er von Guziks Team definiert wurde, in Frage. (Zu Erik Guziks Forschungsgebieten gehören Unternehmertum und die Ökonomie der Kreativität.) Aber Guzik sagt, er habe ChatGPT gefragt, was es bedeuten würde, wenn sie beim TTCT gut abschneiden würde. Laut dem Professor gab der KI-Chatbot von OpenAI eine „starke“ Antwort. Guzik teilte diese Antwort während der Konferenz.

ChatGPT sagte uns, dass wir die menschliche Kreativität möglicherweise nicht vollständig verstehen, was meiner Meinung nach richtig ist. „ChatGPT hat auch darauf hingewiesen, dass wir möglicherweise ausgefeiltere Bewertungstools benötigen, die zwischen von Menschen generierten und von KI generierten Ideen unterscheiden können“, sagte Guzik. Er glaubt, dass TTCTs geschütztes proprietäres Material sind, sodass ChatGPT nicht „schummeln“ konnte, indem es auf Informationen über den Test im Internet oder in einer öffentlichen Datenbank zugreift. Guzik erklärte, dass das TTCT Fragen verwendet, die reale kreative Aufgaben nachahmen.

Die Studienergebnisse stehen im Gegensatz zu Behauptungen, dass aktuelle KI-Tools nicht intelligent seien. Beispielsweise sagte Yann LeCun, Leiter KI bei Meta, im Juni, dass aktuelle KI-Systeme wie ChatGPT kaum schlauer als ein Hund seien. Der KI-Forscher geht davon aus, dass aktuelle KI-Systeme zwar sehr begrenzt sind, aber auch kein Verständnis für die zugrunde liegende Realität der realen Welt haben. LeCun behauptet, dass KI-Systeme grundlegende Aufgaben wie das Ausräumen einer Spülmaschine nicht erlernen können. LeCun gilt als einer der Väter des Deep Learning.

Guzik sagte, er erwarte, dass ChatGPT viele Ideen (Fluidität) generieren kann, denn das ist es, was generative KI leistet. Und er reagierte hervorragend auf die Einladung und lieferte den Gutachtern viele relevante, nützliche und wertvolle Ideen. Er sagte auch, er sei überrascht von der Fähigkeit von ChatGPT, originelle Ideen zu generieren, die ein Markenzeichen der menschlichen Vorstellungskraft sind. Auf der Konferenz erfuhren wir, dass vor einem Jahr Forschungen zu GPT-3 durchgeführt wurden. Damals schnitt ChatGPT bei Aufgaben, die unkonventionelles Denken erforderten, nicht so gut ab wie Menschen“, erklärt Guzik.

Heute gehört es mit GPT-4 zu den Top 1 % aller menschlichen Reaktionen“, fügte er hinzu. Guzik geht davon aus, dass KI angesichts des beschleunigten Fortschritts der KI in Zukunft zu einem wichtigen Werkzeug für die Geschäftswelt werden wird. Für mich bedeutet Kreativität, Dinge anders zu machen. Eine der Definitionen von Unternehmertum, die mir gefällt, ist, dass Unternehmertum bedeutet, anders zu denken. KI kann uns also dabei helfen, die Welt des kreativen Denkens auf Unternehmen und den Innovationsprozess anzuwenden, was mich fasziniert“, sagte Guzik. Er fügte hinzu, dass es wichtig sei, bei der Integration von KI in Prozesse vorsichtig zu sein.

Ich denke, wir wissen, dass die Zukunft auf die eine oder andere Weise KI beinhalten wird. Wir müssen bei der Verwendung vorsichtig sein und die notwendigen Regeln und Vorschriften berücksichtigen. Doch Unternehmen nutzen es bereits für viele kreative Aufgaben. Im Hinblick auf Unternehmertum und regionale Innovation ist dies ein Wendepunkt“, sagte Guzik.

Quelle : Studienbericht

Und du ?

Was ist Ihre Meinung zu diesem Thema? Was halten Sie von den Ergebnissen der Studie? Kann generative KI Ihrer Meinung nach originell sein?

Siehe auch

Sind die Ängste vor KI übertrieben? Ein theoretischer Physiker nennt Chatbots „verherrlichte Tonbandgeräte“

Der Leiter der KI-Abteilung bei Meta sagt, künstliche Intelligenz sei noch nicht so schlau wie ein Hund, und lehnt die Vorstellung ab, dass Roboter die Welt erobern werden

Wird Quantencomputing die KI stärken und unser Verständnis der Realität verändern? Sie könnte der KI den Treibstoff geben, den sie zur Transformation braucht