Aktuelle Erkenntnisse der University of Montana und Partner zeigen, dass künstliche Intelligenz basierend auf einem Standardtest für Kreativität mit den kreativen Fähigkeiten des besten 1 % der menschlichen Teilnehmer mithalten kann.

Unter der Leitung von Dr. Erik Guzik, einem klinischen Assistenzprofessor am College of Business der UM, verwendete das Team die Torrance Tests of Creative Thinking – ein seit Jahrzehnten bekanntes Instrument zur Beurteilung der menschlichen Kreativität.

Die Forscher reichten acht Antworten ein, die von ChatGPT generiert wurden, der Anwendung, die auf der GPT-4-Engine für künstliche Intelligenz basiert. Sie reichten auch Antworten einer Kontrollgruppe von 24 UM-Studenten ein, die an Guziks Kursen zu Unternehmertum und persönlichen Finanzen teilnahmen. Diese Ergebnisse wurden mit denen von 2.700 College-Studenten im ganzen Land verglichen, die 2016 am TTCT teilgenommen hatten. Alle Einsendungen wurden vom Scholastic Testing Service bewertet, der nicht wusste, dass KI im Spiel war.

Die Ergebnisse platzierten ChatGPT in der Spitzengruppe der Kreativität. Die KI-Anwendung lag im oberen Perzentil für Sprachkompetenz – die Fähigkeit, eine große Menge an Ideen zu generieren – und für Originalität – die Fähigkeit, neue Ideen zu entwickeln. Die KI rutschte etwas ab – bis zum 97. Perzentil – wegen der Flexibilität und der Fähigkeit, verschiedene Arten und Kategorien von Ideen zu generieren.

„Für ChatGPT und GPT-4 haben wir zum ersten Mal gezeigt, dass es in puncto Originalität zu den besten 1 % gehört“, sagte Guzik. „Das war neu.“

Mit Genugtuung stellte er fest, dass einige seiner UM-Studenten ebenfalls zu den besten 1 % gehörten. Allerdings übertraf ChatGTP landesweit die große Mehrheit der College-Studenten.

Erik Guzik ist klinischer Assistenzprofessor am College of Business der University of Montana. Bildnachweis: UM-Foto von Ryan Brennecke

Guzik testete die KI und seine Studierenden im Frühjahrssemester. Er wurde bei der Arbeit von Christian Gilde von der UM Western und Christian Byrge von der Universität Vilnius unterstützt. Die Forscher präsentierten ihre Arbeit im Mai auf der Southern Oregon University Creativity Conference.

„Wir haben auf der Konferenz sehr darauf geachtet, die Daten nicht zu sehr zu interpretieren“, sagte Guzik. „Wir haben gerade die Ergebnisse präsentiert. Aber wir haben starke Beweise dafür vorgelegt, dass KI kreative Fähigkeiten zu entwickeln scheint, die den menschlichen Fähigkeiten ebenbürtig sind oder diese sogar übertreffen.“

Guzik sagte, er habe ChatGPT gefragt, was es bedeuten würde, wenn es beim TTCT gut abschneiden würde. Die KI gab eine starke Antwort, die sie auf der Konferenz teilte:

„ChatGPT hat uns gesagt, dass wir die menschliche Kreativität möglicherweise nicht vollständig verstehen, was meiner Meinung nach richtig ist“, sagte er. „Es deutete auch darauf hin, dass wir möglicherweise ausgefeiltere Bewertungstools benötigen, die zwischen menschlichen und KI-generierten Ideen unterscheiden können.“

Er sagte, dass es sich beim TTCT um geschütztes proprietäres Material handele, sodass ChatGPT nicht „schummeln“ könne, indem es auf Informationen über den Test im Internet oder in einer öffentlichen Datenbank zugreife.

Guzik interessiert sich schon lange für Kreativität. Als Siebtklässler, der in der Kleinstadt Palmer, Massachusetts, aufwuchs, nahm er an einem Programm für begabte Schüler teil. Diese Erfahrung machte ihn mit dem Future Problem Solving-Prozess bekannt, der von Ellis Paul Torrance entwickelt wurde, dem bahnbrechenden Psychologen, der auch das TTCT entwickelt hat. Guzik sagte, er habe sich damals in Brainstorming verliebt und wie es die menschliche Vorstellungskraft anregt, und er bleibt weiterhin aktiv in der Organisation Future Problem Solving – und traf sogar seine Frau auf einer ihrer Konferenzen.

Guzik und sein Team beschlossen, die Kreativität von ChatGPT zu testen, nachdem sie im vergangenen Jahr damit herumexperimentiert hatten.

„Wir haben alle mit ChatGPT experimentiert und festgestellt, dass es einige interessante Dinge bewirkt, die wir nicht erwartet hatten“, sagte er. „Einige der Antworten waren neuartig und überraschend. Da beschlossen wir, es auf die Probe zu stellen, um zu sehen, wie kreativ es wirklich ist.“

Guzik sagte, der TTCT-Test verwende Eingabeaufforderungen, die reale kreative Aufgaben nachahmen. Können Sie sich zum Beispiel neue Verwendungsmöglichkeiten für ein Produkt vorstellen oder dieses Produkt verbessern?

„Sagen wir, es ist ein Basketball“, sagte er. „Denken Sie an so viele Einsatzmöglichkeiten eines Basketballs wie möglich. Sie können es in einem Reifen schießen und in einer Ausstellung verwenden. Wenn Sie sich dazu zwingen, über neue Verwendungsmöglichkeiten nachzudenken, schneiden Sie es vielleicht in Stücke und verwenden es als Pflanzgefäß. Oder mit einem Ziegelstein kann man Dinge bauen oder er kann als Briefbeschwerer verwendet werden. Aber vielleicht zerkleinern Sie es und verwandeln es in etwas völlig Neues.“

Guzik hatte einige Erwartungen, dass ChatGPT gut darin sein würde, viele Ideen zu entwickeln (Flüssigkeit), denn das ist es, was generative KI leistet. Und es hat hervorragend auf die Aufforderung mit vielen Ideen reagiert, die in den Augen der Bewerter relevant, nützlich und wertvoll waren.

Er war eher überrascht, wie gut es dabei war, originelle Ideen hervorzubringen, was ein Markenzeichen der menschlichen Vorstellungskraft ist. Als Eingabeaufforderung erhalten die Testauswerter Listen mit häufigen Antworten, von denen man fast erwartet, dass sie abgegeben werden. Allerdings landete die KI im oberen Perzentil, wenn es darum ging, neue Antworten zu finden.

„Auf der Konferenz erfuhren wir von früheren Forschungsarbeiten zu GPT-3, die vor einem Jahr durchgeführt wurden“, sagte Guzik. „Zu dieser Zeit schnitt ChatGPT bei Aufgaben, die originelles Denken erforderten, nicht so gut ab wie Menschen. Mit dem fortschrittlicheren GPT-4 gehört es jetzt zu den Top 1 % aller menschlichen Reaktionen.“

Er geht davon aus, dass die KI-Fortschritte immer schneller voranschreiten und dass sie künftig zu einem wichtigen Werkzeug für die Geschäftswelt und zu einem bedeutenden neuen Treiber für regionale und nationale Innovationen wird.

„Für mich bedeutet Kreativität, Dinge anders zu machen“, sagte Guzik. „Eine der Definitionen von Unternehmertum, die ich liebe, ist, dass Unternehmertum bedeutet, anders zu denken. KI kann uns also helfen, die Welt des kreativen Denkens auf Unternehmen und Innovationsprozesse anzuwenden, und das fasziniert mich einfach.“

Er sagte, das UM College of Business sei offen dafür, über KI zu unterrichten und sie in die Lehrveranstaltungen zu integrieren.

„Ich denke, wir wissen, dass die Zukunft in gewisser Weise KI beinhalten wird“, sagte Guzik. „Wir müssen bei der Verwendung vorsichtig sein und die erforderlichen Regeln und Vorschriften berücksichtigen. Aber Unternehmen nutzen es bereits für viele kreative Aufgaben. Im Hinblick auf Unternehmertum und regionale Innovation ist dies ein Game Changer.“