ChatGPT ist in der Wissenschaft Gegenstand großer Diskussionen, insbesondere darüber, wie seine unbefugte Verwendung im Unterricht verhindert werden kann. Studierende können jedoch davon profitieren, wenn sie verstehen, wie sie generative künstliche Intelligenz (KI) als Werkzeug nutzen können, um Zeit zu sparen und die Leistung bei Schreibaufgaben zu verbessern.

Craig Hurwitz, Executive in Residence an der Pratt School of Engineering, bat die Doktoranden seines Kurses „Emerging Trends in Financial Technology (Fintech)“, mit Hilfe von ChatGPT einen ersten Entwurf eines Aufsatzes zu erstellen. Seine Arbeitsannahme war, dass Studierende, wenn sie ins Berufsleben eintreten, Zugang zu generativer KI haben und diese für Produktivitätszwecke nutzen können. Er wollte in seinem Kurs mit ChatGPT experimentieren, um den Studierenden einen ersten Einblick in den Einsatz generativer KI zu geben.

Für die Aufgabe wurde die Klasse angewiesen, eine Fallstudie zu lesen, und jeder Schüler wählte einen Fintech-Ansatz, um bei der Lösung einer bestimmten im Fall genannten Herausforderung zu helfen. Ihre schriftliche Aufgabe bestand darin, eine Zusammenfassung mit 750 Wörtern zu verfassen und den Dozenten (der die Rolle des Risikokapitalgebers spielte) davon zu überzeugen, warum er ein Treffen in Betracht ziehen sollte, um eine mögliche Investition zu besprechen.

Die Anweisungen sahen vor, dass jeder Schüler einen ersten Entwurf mit ChatGPT erstellen sollte. Nachdem sie den Entwurf erstellt hatten, importierten sie ihn in Microsoft Word und aktivierten „Änderungen verfolgen“. Sie haben den ursprünglichen Entwurf bearbeitet und den endgültigen Entwurf eingereicht, wobei „Änderungen verfolgen“ noch aktiviert war.

Dies gab dem Professor die Möglichkeit, den von ChatGPT erstellten Entwurf, die an diesem Entwurf vorgenommenen Änderungen und das von jedem Studenten eingereichte Endprodukt einzusehen. Die Spanne der unbearbeiteten Endausgabe reichte von etwa 20 Prozent bis über 90 Prozent. Im Anschluss an die Aufgabe füllten die Studierenden eine Umfrage zu ihren Erfahrungen mit der Aufgabe aus. Dieser Beitrag fasst die Reaktionen der Studierenden auf die Verwendung von ChatGPT zusammen.

KI als Arbeitsfähigkeit

Die Studierenden betrachteten diese Aufgabe als wichtige Schulung, da sie davon ausgehen, dass sie KI am Arbeitsplatz einsetzen werden. Es gab viele Kommentare darüber, dass diese Aufgabe eine Gelegenheit zum Lernen war, wie man einen KI-Chatbot effektiv nutzt und dass dies eine wertvolle Fähigkeit sein wird, wenn sie ihren Abschluss machen und eine Vollzeitstelle in der Belegschaft übernehmen.

Ein Student erklärte: „Die Arbeit an dieser Aufgabe hat mir wirklich Spaß gemacht. Ich glaube, dass das, was Sie uns zulassen, das ist, was im wirklichen Leben passieren wird. Das Abschließen dieser Aufgabe ist für uns eine gute Übung, um KI zur Verbesserung unserer Arbeit einzusetzen.“

Eine besondere Fähigkeit, die die Schüler erworben haben, ist das Verfassen effektiver Aufforderungen in ChatGPT. Viele Studenten erkannten, dass die Entwicklung einer geeigneten Aufforderung ein iterativer Prozess ist und der Schlüssel zu einer erfolgreichen Erfahrung ist. Fast alle Schüler begannen diese Übung mit dem Versuch, mit einer einzigen Eingabeaufforderung den gesamten Aufsatz zu erstellen.

Allerdings empfanden die meisten Studierenden die Ausgabe als zu allgemein und in den meisten Fällen als zu repetitiv. Die häufigste Reaktion darauf bestand darin, an ChatGPT spezifische Folgefragen mit beschreibendem, prägnantem Text zu senden, der darauf abzielte, eine Ausgabe für einen bestimmten Absatz, oder genauer gesagt, einen Aufzählungspunkt, zu erstellen.

Mehrere Studenten äußerten sich dazu, wie wichtig es sei, ChatGPT darin zu schulen, eine bestimmte Rolle zu übernehmen, bevor es aufgefordert wird, eine schriftliche Ausgabe zu generieren. „Ich würde mehr Wert darauf legen, die KI so zu trainieren, dass sie eine bestimmte Person annimmt, anstatt viel Zeit damit zu verbringen, die richtige Aufforderung herauszufinden“, kommentierte ein Student in der Umfrage nach der Aufgabe.

Effizienz beim Schreiben

Jeder Student gab an, dass die Verwendung eines KI-Chatbots zur Erstellung eines ersten Entwurfs hilfreich sei. Neunzig Prozent der Studierenden gaben an, dass der Einsatz eines KI-Chatbots eine Zeitersparnis sei. Ein Student bemerkte: „Für jede Minute, die Sie mit ChatGPT verbringen, sparen Sie zehn Minuten, aber stellen Sie sicher, dass Sie der KI genau die Informationen geben, mit denen sie arbeiten soll, und das Risiko von Fehlern ist minimal.“

Einundzwanzig von 36 Schülern der Klasse, die Englisch als Zweitsprache sprechen, verspürten einen weiteren Vorteil. Jeder von ihnen gab an, vor dieser Aufgabe bereits Erfahrung mit ChatGPT gehabt zu haben. Ein häufiger Refrain war, dass die Verwendung eines KI-Chatbots ihnen dabei half, so zu schreiben, als wäre Englisch ihre Muttersprache. Ein Student warnte jedoch: „Die von der KI verwendete Grammatik war perfekt, aber die Sprache empfand ich als vage und unausgeklügelt.“ Dieser Kommentar weist darauf hin, dass die Schüler die Einschränkungen von ChatGPT allgemein verstehen.

Einschränkungen

Während die Studierenden ChatGPT als nützlich empfanden, gab es erhebliche Kommentare zu den Einschränkungen dieser Generation der Technologie. Einschränkungen fallen im Allgemeinen in eine von drei Kategorien: 1) falsche Quellen, 2) veraltete Quellen und 3) die Ausgabe ist nur so gut wie die Eingabeaufforderung. „Ich habe herausgefunden, dass ChatGPT korrekte Informationen generiert hat, aber mit falschen Zitaten“, bemerkte ein Student.

Über die Hälfte der Klasse stellte fest, dass ChatGPT falsche Informationen generierte und nur zwei von 36 zeigten Vertrauen in die von ChatGPT zitierten Quellen. Die Schüler haben verstanden, dass die Überprüfung von Fakten ein wesentlicher Bestandteil der Verwendung von ChatGPT zum Schreiben ist, da die Integrität der Quelle ein großes Problem darstellt. Da die Aufgabe der Studenten außerdem darin bestand, aufkommende Trends im Fintech-Bereich hervorzuheben, konnten sie sich nicht auf die älteren Daten von ChatGPT verlassen (September 2021).

Beachten Sie, dass die Schüler für diese KI-Aufgabe das GPT-3.5-Modell verwendet haben; Das war vor der Veröffentlichung von GPT-4.0, als sich die Möglichkeit, Quellen zu zitieren, etwas verbesserte, aber es bleibt problematisch, sich auf die von GPT bereitgestellten Quellen zu verlassen.

Viele Studierende äußerten, dass ihnen die Arbeit an der Aufgabe Spaß gemacht habe, sie seien sich jedoch der ethischen Aspekte wie geistiges Eigentum bewusst und seien sich darüber im Klaren, dass Leitplanken notwendig seien. Die Verwendung von ChatGPT für Studierende kann nur einen Schritt im Schreibprozess darstellen. „Der Bot sollte nicht als abschließende Antwort verwendet werden, sondern lediglich als Möglichkeit, ein Thema zu verstehen oder Ideen zu sammeln. Die Fähigkeit von ChatGPT, Quellen zu synthetisieren und Informationen zu verdichten, ist großartig, sollte aber nicht unsere eigenen Filter und die Fähigkeit dazu ersetzen.“ Wir selbst haben denselben Job.

Abschluss

Generative KI-Fähigkeiten entwickeln sich schnell weiter. Es handelt sich um ein Produktivitätstool, das in der Belegschaft wahrscheinlich große Akzeptanz und Nutzung finden wird. Den Schülern beizubringen, wie sie die Technologie angemessen und effektiv nutzen können, ist eine wichtige Lebenskompetenz. Für diejenigen, die sich Sorgen darüber machen, ob die von ChatGPT generierte Ausgabe die Arbeit des Tools oder des Studenten ist, gibt es keinen Ersatz dafür, die Grundlagenforschung durchzuführen, ein klares Verständnis davon zu haben, was Sie mitteilen möchten, und im Voraus zu wissen, die schriftliche Struktur, die Sie von ChatGPT erwarten.

Aus der Sicht eines Professors, der den größten Teil seiner Karriere in der Industrie verbracht hat, war es bereichernd zu sehen, wie schnell sich Studierende an die Technologie gewöhnten und sie optimierten und wie dies zu effizienteren und in vielen Fällen qualitativ hochwertigeren Aufsätzen führte als was sie sonst vielleicht erreicht hätten.