Forscher haben verräterische Anzeichen dafür identifiziert, dass Studierende KI zum Verfassen ihrer Aufsätze genutzt haben.

Die übermäßige Verwendung lateinischer Wörter, die Verwendung unnötiger Wörter und die wiederholte Verwendung des Oxford-Kommas gehören laut Forschern zu den Kennzeichen der Verwendung eines generativen Chatbots zur Erledigung von Kursarbeiten gefunden.

Doch während Studierende, die an der Studie teilnahmen, sagten, sie hätten festgestellt, dass der Einsatz von KI einige Vorteile habe, räumten sie ein, dass ein vollständiger Einsatz davon wahrscheinlich zu einer Arbeit von niedrigem Standard führen würde.

Der Einfluss der generativen KI auf die Bildung beschäftigt Pädagogen, seit Open AI im November 2022 ChatGPT auf den Markt brachte – einen Chatbot, der Text generiert, indem er vorhersagt, welche Wörter wahrscheinlich einer bestimmten Aufforderung folgen werden.

Während einige KI als potenzielles Potenzial betrachten transformativ Technologie, die eine integrativere und personalisiertere Bildung schafft, macht es für andere unmöglich Vertrauen Studiennoten. Selbst Akademiker waren nicht davor gefeit mit KI um ihre Arbeit zu verbessern.

Jetzt haben Forscher der Universität Cambridge versucht herauszufinden, ob sie Merkmale des Schreibstils von KI identifizieren könnten, die es leicht machen könnten, ihn zu erkennen.

Und obwohl ihr Versuch von kleinem Umfang war, sagen sie, dass er das Potenzial hat, Lehrern dabei zu helfen, herauszufinden, welche Schüler KI in ihren Aufsätzen verwendeten und welche nicht.

Drei Studenten wurden gebeten, mit Hilfe von ChatGPT jeweils zwei Aufsätze zu schreiben, die dann mit Aufsätzen von 164 Oberstufenschülern zum gleichen Thema verglichen wurden. Anschließend wurden die Studierenden zu ihren Erfahrungen mit der Nutzung von KI befragt.

(Studenten wurden in die Studie einbezogen, da für ChatGPT ein Mindestalter von 18 Jahren erforderlich ist.)

Die ChatGPT-Aufsätze schnitten im Durchschnitt besser ab und erhielten besonders gute Noten für „Information“ und „Reflexion“. Bei „Analyse“ und „Vergleich“ schnitten sie jedoch schlecht ab – die Unterschiede spiegeln nach Ansicht der Forscher die Stärken und Schwächen des Chatbots wider.

Aber was den Stil betrifft, gab es eine Reihe von Merkmalen, die die von ChatGPT unterstützte Version leicht erkennbar machten.

Der standardmäßige KI-Stil „spiegelt den langweiligen, knappen und objektiven Stil wider, der viele generische journalistische Texte im Internet kennzeichnet“, so die Forscher, die eine Reihe wichtiger Merkmale von ChatGPT-Inhalten identifizierten:

• Eine hohe Häufigkeit von Wörtern mit lateinischer Wurzel, insbesondere von mehrsilbigen Wörtern und einem Wortschatz, der über dem erwarteten Niveau liegt;
• Absätze, die mit bestimmten Markierungen beginnen, z. B. „jedoch“, „darüber hinaus“ und „insgesamt“, gefolgt von einem Komma;
• Nummerierte Listen mit Elementen gefolgt von Doppelpunkten;
• Pleonasmen: Verwendung unnötiger Wörter wie „kostenloses Geschenk“ oder „wahre Tatsache“;
• Tautologie: das Gleiche zweimal sagen, zum Beispiel „Wir müssen zusammenkommen, um uns zu vereinen“;
• Wörter oder Sätze wiederholen;
• Konsequente Verwendung von Oxford-Kommas, einem Komma, das nach dem vorletzten Element in einer Liste, vor „und“ oder „oder“ verwendet wird, zum Beispiel „ChatGPT hat viele Verwendungsmöglichkeiten für Lehren, Lernen zu Hause, Wiederholung und Bewertung“.

Obwohl die an der Studie teilnehmenden Studenten ChatGPT in unterschiedlichem Umfang nutzten, vom Kopieren und Einfügen ganzer Passagen bis hin zur Verwendung als Anregung für weitere Recherchen, herrschte weitgehend Einigkeit darüber, dass es zum schnellen Sammeln von Informationen nützlich ist und in Aufsätze integriert werden kann Schreiben anhand spezifischer Eingabeaufforderungen, zum Beispiel zu Themen und Aufsatzstruktur.

Die Studierenden waren sich aber auch einig, dass der Einsatz von KI zum Verfassen des Aufsatzes zu Arbeiten von niedrigem akademischen Niveau führen würde.

„Trotz der geringen Stichprobengröße freuen wir uns über diese Ergebnisse, da sie die Arbeit von Lehrern und Schülern beeinflussen können“, sagte Jude Brady von Cambridge University Press and Assessment, leitender Forscher der Studie.

Zukünftige Arbeiten sollten größere und repräsentativere Stichprobengrößen von Studenten umfassen, sagte sie. Das Erlernen der Nutzung und Erkennung generativer KI sei ein immer wichtigerer Teil der digitalen Kompetenz, fügte sie hinzu.

„Wir hoffen, dass unsere Forschung den Menschen helfen kann, herauszufinden, wann ein Text von ChatGPT geschrieben wurde“, sagte sie.