Die Verfügbarkeit generativer KI (GenAI)-Tools wie chatgpt hat einige herkömmliche Bewertungstools, wie etwa auf Literaturrecherchen basierende Hausarbeiten, praktisch überflüssig gemacht. An der Hong Kong Polytechnic University besteht unsere institutionelle Position darin, GenAI zu nutzen und Lernzwecke und Bewertungsdesign zu überdenken.

Anstatt es zu verbieten oder Erkennungstools zu verwenden, um die Nutzung solcher Tools durch Studierende zu überprüfen, wird die Universität ab September diesen Jahres die Verwendung von GenAI in Take-Home-Bewertungen erlauben und dies auch erwarten. Dies bedeutet, dass Lehrer überdenken müssen, was ihre Schüler lernen sollen, und darüber nachdenken müssen, wie ihre Aufgaben so umgestaltet werden können, dass GenAI verwendet werden kann, um einem Schüler bei der Bearbeitung einer Aufgabe zu helfen, diese aber nicht abzuschließen.

In Zusammenarbeit mit zahlreichen Abteilungen hat das Educational Development Center (EDC) der Universität vier Richtungen eingeschlagen, um eine effektive Neugestaltung der Bewertung anzustreben, die fächer- und institutionenübergreifend anwendbar sein soll.

Zwei wichtige Leitprinzipien, die die Neugestaltung der Bewertung steuern, sind: (a) die Bewertung kann nicht größtenteils oder vollständig von GenAI durchgeführt werden; und (b) die Studierenden müssen nachweisen, dass sie die Konzepte/Fähigkeiten verstehen, die sie erlernt haben. Die folgenden vier Richtungen richten sich nach diesen Grundsätzen.

Richtung 1: Von der schriftlichen Beschreibung zur multimodalen Erklärung und Anwendung

Der erste Schritt besteht darin, mit den Lehrern zusammenzuarbeiten, um die Bewertungsaufgaben so zu überarbeiten, dass die Schüler aufgefordert werden, Konzepte oder Fähigkeiten in einem bestimmten Kontext zu erklären. Dies funktioniert besonders gut in einem lokalen Kontext, mit dem GenAI wahrscheinlich nicht vertraut ist. Letzten Monat habe ich mit einem Professor zusammengearbeitet, dessen vorheriger Auftrag eine Literaturrecherche zu einem bestimmten Thema beinhaltete. In einer seiner neu gestalteten Prüfungen müssen die Studierenden statt der Beschreibung der Hauptkomponenten eines technischen Systems das, was sie im Unterricht gelernt haben, anwenden, um dieses System an einem bestimmten Ort zu analysieren, mit dem sie vertraut sind (bei dem es sich jedoch möglicherweise nicht um GenAI handelt), beispielsweise zu Hause oder auf dem Universitätscampus. Die Studierenden reichen ihre Erläuterungen nicht nur schriftlich ein, sondern müssen zur Untermauerung ihrer Analysen auch Schnappschüsse der Standorte beifügen.

In einem anderen Beispiel könnte eine neu gestaltete Bewertung von den Schülern verlangen, dass sie erklären, wie diese Elemente in einem bestimmten Kontext angezeigt oder nicht angezeigt werden, anstatt die wichtigsten Elemente eines Rahmens zu beschreiben. Ein solcher Kontext könnte ein bestimmter Bezirk oder eine Organisation in der Universitätsstadt sein. In der Zwischenzeit können Prüfungen in einem höheren Studiengang von den Studierenden verlangen, vergleichende Analysen zweier deutlich unterschiedlicher Kontexte oder Orte durchzuführen. Die Studierenden könnten aufgefordert werden, multimodale Beiträge zu verfassen, die nicht nur geschriebenen Text, sondern auch Videos von sich selbst vor Ort enthalten, in denen sie die Anwendung ihres Wissens erläutern.

Richtung 2: Von der reinen Literaturrecherche bis zur Referenzierung von Vorlesungen

Für Kurse ohne Präsenz- und Praxisaspekte ist Richtung 1 eindeutig nicht anwendbar. Daher besteht eine Methode zur Neugestaltung der Bewertung, die den beiden oben genannten Leitprinzipien folgt, darin, von den Studierenden zu verlangen, dass sie sich in ihren Hausarbeiten nicht nur auf die Literatur, sondern auch auf Diskussionen in Vorlesungen/Übungen beziehen. Ein Professor für Geisteswissenschaften an meiner Universität bittet die Studierenden, „auf Theorien aus der Kursliteratur und den Diskussionen, die wir im Unterricht geführt haben, zurückzugreifen, um Ihre Argumentation zu untermauern“. Lehrkräfte können erwägen, die genauen Unterrichtseinheiten und Diskussionen anzugeben, auf die sich die Beurteilung beziehen soll.

Richtung 3: Von der Präsentation von Ideen zur Verteidigung von Ansichten

Eine übliche Leistungsbeurteilung an der Universität ist der mündliche Vortrag. Da GenAI-Tools jedoch attraktive Folien mit einem vollständigen Skript erstellen können, sollte die für den Präsentationsteil vorgesehene Zeit verkürzt und mehr Zeit für eine Frage-und-Antwort-Sitzung aufgewendet werden, in der die studentischen Referenten ihre Ansichten, Methodik und Schlussfolgerungen verteidigen müssen. Sowohl der Lehrer als auch die Mitschüler sollten herausfordernde Fragen stellen, und die Referenten der Schüler werden danach bewertet, wie klar und logisch sie antworten.

Ein Bereich, an dem es sich lohnt, mit Lehrern zusammenzuarbeiten, ist die Verwendung „negativer“ Fragen in den Fragen und Antworten, wie zum Beispiel „Wäre Methode B nicht effektiver gewesen?“, „Warum haben Sie nicht eine andere Perspektive in Betracht gezogen?“ und/oder „hätten die Ergebnisse nicht anders interpretiert werden können?“ Der Zweck besteht darin, die Schüler dazu zu ermutigen, kritisch darüber nachzudenken, wie und warum sie ihre Beurteilung auf die eine und nicht auf die andere Weise durchgeführt haben.

Richtung 4: Von der Einzelarbeit zur Studierenden-Mitarbeiter-Partnerschaft

Insbesondere da viele Studierende mit GenAI-Tools besser vertraut sind als ihre Lehrkräfte, ist die Neugestaltung der Bewertung eine wertvolle Gelegenheit, Studierende als pädagogische Partner einzubeziehen. Den Lehrern meiner Universität wird empfohlen, sich mit Studierenden im letzten Studienjahr, die ihre Kurse belegt haben, zusammenzutun, um Möglichkeiten zu besprechen, wie Bewertungen überarbeitet werden können, sodass GenAI diese Bewertungen für Studenten nicht durchführen kann. Erfolgreiche Partner aus Studierenden und Lehrkräften berichteten kürzlich über ihre Zusammenarbeit bei zwei Veranstaltungen zur Fakultätsentwicklung, und es werden weitere offene Austauschsitzungen organisiert, um bewährte Praktiken weiter vorzustellen.

Abschluss

Das Aufkommen von GenAI hat der Hochschulbildung viele Möglichkeiten geboten, den Zweck der Bewertung und die Art und Weise, wie sie Beweise für das Lernen der Studierenden sammeln, zu überdenken. Neu gestaltete Beurteilungen können es den Schülern ermöglichen, alle verfügbaren Ressourcen, einschließlich GenAI, besser zu nutzen und das Wiederauffliegen von Informationen zu vermeiden, indem sie von den Schülern verlangen, Verständnis durch die Anwendung von Wissen in situierten Kontexten zu demonstrieren und bei der Vervollständigung und Verteidigung ihrer Beurteilung kritisches Denken und Kommunikationsfähigkeiten einzusetzen.

Julia Chen ist Direktorin des Educational Development Center an der Hong Kong Polytechnic University.

Wenn Sie Ratschläge und Einblicke von Wissenschaftlern und Universitätsmitarbeitern wünschen, die jede Woche direkt in Ihren Posteingang geliefert werden, Melden Sie sich für den Campus-Newsletter an.