Eine aktuelle Studie veröffentlicht in Wissenschaftliche Berichte legt nahe, dass die Leistung von ChatGPT bei der Beantwortung von Prüfungsfragen in verschiedenen Disziplinen wie Informatik, Politik, Ingenieurwesen und Psychologie mit der Leistung eines durchschnittlichen College-Studenten vergleichbar sein oder diese sogar übertreffen kann. Darüber hinaus ergab die Studie, dass fast 75 % der befragten Schüler bereit waren, ChatGPT zur Unterstützung bei ihren Hausaufgaben zu nutzen, obwohl viele Pädagogen der Ansicht waren, dass die Verwendung von ChatGPT einem Plagiat gleichkommt.

Um die Leistung von ChatGPT beim Verfassen von Universitätsbewertungen gegenüber Studenten zu untersuchen, luden Talal Rahwan und Yasir Zaki Fakultätsmitglieder ein, die verschiedene Kurse unterrichteten New Yorker Universität Abu Dhabi (NYUAD), um jeweils drei studentische Beiträge für zehn von ihnen definierte Bewertungsfragen bereitzustellen.

ChatGPT wurde dann gebeten, drei Antwortsätze auf die zehn Fragen zu erstellen, die dann zusammen mit den schriftlichen Antworten der Schüler von drei Prüfern (die die Quelle der Antworten nicht kannten) bewertet wurden. Die von ChatGPT generierten Antworten erreichten in 9 von 32 Kursen eine ähnliche oder höhere Durchschnittspunktzahl als die Studierenden. Nur in Mathematik- und Wirtschaftskursen übertrafen die Studenten ChatGPT durchweg. Am deutlichsten übertraf ChatGPT die Studierenden im Kurs „Einführung in die öffentliche Ordnung“, wo die durchschnittliche Punktzahl bei 9,56 lag, verglichen mit 4,39 bei den Studierenden.

Die Autoren befragten außerdem 1.601 Personen aus Brasilien, Indien, Japan, den Vereinigten Staaten und dem Vereinigten Königreich (darunter mindestens 200 Studenten und 100 Lehrer aus jedem Land) zu der Möglichkeit, ChatGPT zur Erleichterung ihrer akademischen Arbeit zu nutzen. 74 % der Studierenden gaben an, dass sie ChatGPT bei ihrer Arbeit nutzen würden. Im Gegensatz dazu unterschätzten Lehrer in allen Ländern den Anteil der Schüler, die die Verwendung von ChatGPT in Betracht ziehen, und 70 % der Lehrer gaben an, dass sie die Verwendung von ChatGPT als Plagiat in Betracht ziehen würden.

Schließlich berichten die Autoren, dass zwei KI-generierte Textidentifizierungstools – GPTZero und AI Text Classifier – die in dieser Forschung generierten ChatGPT-Antworten in 32 % bzw. 49 % der Fälle fälschlicherweise als von Menschen geschrieben klassifizierten.

Zusammengenommen bieten diese Ergebnisse Erkenntnisse, die als Grundlage für Richtlinien zum Einsatz von KI-Tools in Bildungseinrichtungen dienen könnten.