Mit Hilfe künstlicher Intelligenz geschriebene, beantwortete und bewertete Tests werden in Großbritannien zunehmend eingesetzt. Der Nationale wurde mitgeteilt, da Schulen und Universitäten aufgefordert werden, Technologien wie chatgpt zu nutzen.
Britische Prüfungsausschüsse sind offen für Roboter, die „geringfügige“ Fragen stellen, die von einer Maschine „in Kombination mit menschlicher Beteiligung“ bewertet werden könnten.
Schülern und Studierenden könnte es auch gestattet sein, KI als eine Form des „Open-Book-Testings“ zu nutzen, und sie sollten ermutigt werden, frei über die Verwendung großer Sprachmodelle zu sprechen, sagten Pädagogen.
„In manchen Kontexten kann es völlig zulässig sein, den Einsatz von KI-Tools zu erlauben, genauso wie manche Prüfungen den Kandidaten die Nutzung von Taschenrechnern oder Suchmaschinen erlauben“, sagte Alex Scharaschkin, Direktor für Forschung und Innovation beim Prüfungsausschuss AQA.
Wie google und Wikipedia zuvor hat der Aufstieg von ChatGPT und ähnlicher KI-Software düstere Besorgnis über Betrug bei Prüfungen und die Integrität der Bildung geweckt.
Ein weiterer Wandel kommt mit der KI, die auf fast alles plausibel klingende Antworten generieren kann – obwohl sie manchmal „Halluzinationen“ hat und selbstbewusst etwas völlig Falsches sagt.
Doch Sam Illingworth, außerordentlicher Professor für Lernen und Lehren an der Edinburgh Napier University, meint, dass das Narrativ, dass die neue Technologie „die Welt zerstören“ werde, zurückgewiesen werden sollte.
Er sagte, KI gebe Lehrern die Möglichkeit, „authentische Beurteilungen“ vorzunehmen, die schwer zu plagiieren seien, indem sie beispielsweise Schüler dazu auffordern, über ihre eigenen sozialen Vorurteile nachzudenken.
Ein anderer Ansatz könnte darin bestehen, Studenten und Schüler zu bitten, mit ChatGPT Antworten zu generieren und dann die Mängel der Ergebnisse zu besprechen. Die Universität hat Studierende eingeladen, anonym zu kommentieren, wie sie die Technologie nutzen.
„Wir sprechen mit Studenten und sie nutzen es nicht wirklich, um mit generativer KI zu plagiieren“, sagte er.
„Sie verwenden es als Lernwerkzeug, sie verwenden es, um ihre Sprache zu überprüfen, wenn sie Englisch als Zweitsprache haben, sie verwenden es zur Rechtschreibprüfung.
„Der wirklich beste Rat, den wir geben können, ist, diese offenen Gespräche mit unseren Schülern zu führen und nicht einfach davon auszugehen, dass sie es auf eine Weise nutzen, wie wir denken.“
Das Tony Blair Institute, die Denkfabrik des ehemaligen Premierministers, hat von einer „zukunftssicheren Bildung“ gesprochen, um die Lücke zwischen der aktuellen Schulbildung und den Anforderungen des Arbeitsmarktes von morgen zu schließen.
Darin heißt es, dass Schüler Fähigkeiten wie kritisches Denken und Kreativität anstelle von „direktem Unterricht und Auswendiglernen“ benötigen, um „an zunehmend digitalen Arbeitsplätzen erfolgreich zu sein“.
Britische Schüler erhalten ihre A-Level-Ergebnisse – in Bildern
So testen Sie im Zeitalter der KI
Eine der größten Herausforderungen für Lehrer besteht darin, Fragen zu schreiben, die die Klugheit der Menschen auf die Probe stellen, selbst wenn sie ChatGPT an ihrem Schreibtisch haben.
Laut OCR des Prüfungsausschusses ist es für Schüler ab November akzeptabel, KI für erste Recherchen zu verwenden, was „nicht anders als das Lesen veröffentlichter Artikel oder Bücher oder das Durchsuchen einer Suchmaschine“ behandelt wird. Sie können auch zwei oder drei Sätze KI-generierten Text verwenden, wenn sie ihn kritisch diskutieren.
„Open-AI-Prüfungen scheinen für mich die neuen Open-Book-Tests zu sein. Prüfungen und Aufgaben sollten so gestaltet sein, dass sie auch mit Hilfe von KI anspruchsvoll bleiben“, sagte Kiana Jafari Meimandi, Forscherin an der University of Virginia.
„Während große Sprachmodelle Antworten liefern können, ist die Genauigkeit nicht immer garantiert, ähnlich wie bei Suchmaschinenergebnissen.“
Doch für Lehrkräfte besteht die Aussicht auf Zeitersparnis: Auch sie könnten auf KI zurückgreifen, um Fragen zu schreiben, insbesondere in naturwissenschaftlichen Fächern, in denen es weniger Interpretationsspielraum gibt.
Laura Gould, die seit 10 Jahren Naturwissenschaftslehrerin in Großbritannien ist, sagte, Sprachmodelle seien ein „wirklich cooles Werkzeug“, das Zeit und Energie sparen könne, selbst wenn „am Ende noch ein paar Optimierungen und Feinabstimmungen vorgenommen werden“.
„Einige Pädagogen verwenden es zum Brainstorming und zum Entwerfen von Unterrichtsplänen und Einheitsplänen und haben festgestellt, dass es für die Lehrplanarbeit sehr hilfreich ist“, sagte sie.
„Man kann damit auch Grammatikübungen und Beispielsätze erstellen, was wirklich schön ist und einem einiges an Gehirnleistung spart.“
In jüngsten Beweisen, die dem britischen Bildungsministerium vorgelegt wurden, haben Prüfungsausschüsse erklärt, dass sie der Idee aufgeschlossen gegenüberstehen, räumen jedoch ein, dass KI Grenzen hat.
Laut OCR des Prüfungsausschusses könne KI „eine große Anzahl von Multiple-Choice-Fragen“ bereitstellen, habe aber „mit der Komplexität zu kämpfen“. Es hieß, dass die Ausgaben eines Chat-Bots „immer noch von menschlichen Bedienern überwacht und genehmigt werden müssten“.
In der Stellungnahme hieß es: „Wir können generative KI nicht wieder in ihre Schublade stecken“ und es hieß: „Wir müssen die Möglichkeiten der Bildung nutzen und uns gleichzeitig der Grenzen bewusst sein.“
AQA, das Tests für Apps wie ChatGPT durchgeführt hat, sagt, dass „hochrangige Prüfungen nicht von Robotern bewertet werden“, sondern dass Prüfer KI als Hilfsmittel nutzen können und dass Bots „informelle Bewertungen im Unterricht“ durchführen könnten.
Herr Scharaschkin erzählte Der Nationale dass KI Entwürfe von Fragen erstellen kann, dass aber „erhebliche menschliche Aufsicht erforderlich ist, um sie zu überarbeiten und zu ändern“.
„Es ist möglich, eine angemessene Genauigkeit zu erreichen, wenn Bewertungskriterien streng regelbasiert spezifiziert werden können, aber es ist schwieriger, einen KI-Klassifikator so zu trainieren, dass er das menschliche Expertenurteil konsistent nachbildet und beispielsweise den Grund für die vergebenen Noten erklärt.“ bei der Bewertung von Aufsätzen“, sagte er.
AQA hat vorgeschlagen, dass KI-Tools wie neue Medikamente Tests bestehen müssen, in denen sie auf Voreingenommenheit, Wirksamkeit und Urheberrechtsverletzungen überprüft werden. Darin heißt es, dass Schüler etwas über KI und ihre Vorteile und Risiken lernen sollten.
„Wir gehen davon aus, dass künftige Bewertungen digitaler Kompetenzen diese Themen umfassen werden“, sagte Herr Scharaschkin.
Was KI sagt
Der Nationale Stellen Sie der KI die KI-Frage: Wie schreibt man Tests oder stellt Aufgaben, bei denen man mit KI nur schwer schummeln kann?
Drei KI-Tools lieferten eine mehr oder weniger identische Antwort, wobei der Schwerpunkt auf offenen Fragen lag.
„Anstatt beispielsweise zu fragen: ‚Was ist 2 + 2?‘, könnten Sie fragen: ‚Erklären Sie das Konzept der Addition in der Mathematik‘“, schlug ChatGPT vor.
Es wurden auch Herausforderungen oder Rätsel vorgeschlagen, die der Captcha-Software ähneln – man denke an das „Klicken auf alle Bilder von Bussen“ –, die Spam-Internetnutzer abwehren sollen.
Eine zweite App, Wordtune, sagte, Tests in mehreren Bereichen gleichzeitig, etwa konzeptionelles Verständnis und kritisches Denken, könnten KI-Bots besiegen, die „oft in bestimmten Bereichen hervorragende Leistungen erbringen, aber Schwierigkeiten haben, über mehrere Domänen hinweg konsistente Leistungen zu erbringen“.
Wie bei anderen Apps hieß es auch, dass eine zufällige Reihenfolge der Fragen die KI daran hindern könnte, Muster zu erkennen. Googles Chat-Bot Bard sagte, Schüler und Studenten könnten gebeten werden, „ihre Argumente zu erläutern“, um zu zeigen, dass sie sich nicht nur Fakten merken.
„Es ist wichtig zu beachten, dass kein Test oder keine Aufgabe völlig immun gegen Betrug ist, aber wenn Sie diese Tipps befolgen, können Sie es der KI erschweren, zu betrügen“, hieß es.
Darin hat es vielleicht richtig geraten.
Aktualisiert: 4. September 2023, 03:00 Uhr