Was wäre, wenn künstliche Intelligenz auf dem Papier das Zeug dazu hätte, die kanadische Staatsbürgerschaft zu erhalten? Laut einer Übung von Die Pressedas ist tatsächlich so.

Um den kanadischen Staatsbürgerschaftstest zu bestehen, muss ein Neuankömmling eine Mindestpunktzahl von 75 % erreichen. Es geht darum, mindestens 15 richtige Antworten auf 20 Fragen mit jeweils vier Auswahlmöglichkeiten zu sammeln.

Um mit einer aussagekräftigen Stichprobe arbeiten zu können, Die Presse Ich habe von einer spezialisierten Website ein Dokument mit 50 maßgeschneiderten Fragen erhalten. Diese verwaltet eine regelmäßig aktualisierte Datenbank mit mehreren hundert Fragen, die während eines echten Tests gestellt werden können.

chatgpt fand auf 41 dieser 50 Fragen die richtige Antwort, was einem mehr als zufriedenstellenden Ergebnis von 82 % entspricht. Und das innerhalb von etwa fünfzehn Sekunden.

Somit war der Gesprächsagent in der Lage, angemessen auf Fragen zur Geschichte, zu den Gesetzen, zur Regierung und zu den Symbolen der kanadischen Föderation zu antworten.

Zu seinen guten Antworten gehörte, dass er den Erfinder des Schneemobils, den Ursprung des Wortes Kanada oder das Mindestalter für das Wahlrecht identifizieren konnte, außerdem verstand er den Prozess der Senatorenauswahl und den Grund für die Berühmtheit der Bay of Fundy , Zum Beispiel.

Im Wesentlichen „wird diese Prüfung verwendet, um Ihre Kenntnisse über Kanada und die Privilegien und Pflichten der kanadischen Staatsbürgerschaft zu beurteilen“, heißt es in einem Video auf der offiziellen Website der Regierung. Erwachsene im Alter von 18 bis 54 Jahren müssen es einnehmen.

Ist es für Kanadier, die eher in die Kategorie „Sir, Madam alle“ fallen und die ihn noch nie absolvieren mussten, einfach, den Staatsbürgerschaftstest zu bestehen? Laut einer aktuellen Umfrage ist dies nicht der Fall.

Diese Woche führte die Firma Léger die Übung mit 1.512 kanadischen Bürgern durch: Nur 23 % von ihnen erreichten die bestandene Note. Ihr kumulierter Durchschnitt lag bei 49 %, was weit von dem Ergebnis für die Erlangung der Staatsbürgerschaft entfernt ist.

Es erklärt

Beim Vergleich menschlicher Ergebnisse mit denen von ChatGPT sticht ein klarer Gewinner hervor. Künstliche Intelligenz ist einen Schritt voraus.

Könnten Leute, die den Test – online – absolvieren, das gute alte Lernhandbuch aufgeben und den einfachen Weg einschlagen? Gilt dieses an Hochschulen bereits bestehende Problem nun auch für Prüfungen des Bundes?

„Bevor die Prüfung beginnen kann, müssen Kunden ihre Identität anhand ihrer persönlichen Daten bestätigen und mit einer Webcam ein Foto von sich und ihren persönlichen Ausweisdokumenten machen“, antwortet Immigration, Refugees and Citizenship Canada (IRCC).

„Das für den Staatsbürgerschaftstest verwendete System kann auch erkennen, ob der Antragsteller während des Tests andere Fenster, Tabs, Browser oder Anwendungen geöffnet hat“, fügt das IRCC hinzu.

Ist eine künstliche Intelligenz, die einen solchen Test besteht, gleichbedeutend mit der bevorstehenden Herrschaft der Maschinen über den Menschen? Auf keinen Fall, Sie können atmen.

„ChatGPT musste keine Nuancen finden oder komplizierte Fragen beantworten, die das verbale Verständnis testen“, sagt Laurent Charlin, leitendes Mitglied des Quebec Artificial Intelligence Institute Mila und außerordentlicher Professor an der HEC Montreal, in einem Interview. „Ich habe mir Beispielfragen angesehen und es handelt sich dabei um relativ grundlegende Fakten. Einfachheit hilft. »

„Das andere, was wichtig ist: Die Chancen stehen gut, dass er über seine Datenbank bereits Zugriff auf einige oder alle dieser Fragen hatte“, fügt er hinzu.

Feiner Mai Die Presse Ich habe gerade berichtet, dass ChatGPT die Anwaltsprüfung kläglich durchgefallen ist. Bei komplexen Fragen, die darauf abzielten, das Wissen von Hochschulabsolventen der Rechtswissenschaften zu testen, hatte das von OpenAI entwickelte Tool eine schlechte Bewertung von 12 % erhalten.

Es sind die Nuancen und die Komplexität, in denen der Gesprächsagent verloren geht, bestätigt Laurent Charlin. „Es ist ein Werkzeug, das Stärken hat, aber unvollkommen ist. Er hat die Fähigkeit, Fragen in verschiedenen Bereichen zu beantworten, sagt aber manchmal Dinge, die völlig falsch sind. »

„ChatGPT, wir haben noch nicht alle seine Fähigkeiten richtig eingeschätzt. Man muss einen ziemlich kritischen Geist bewahren. Er ist zu vielen Dingen fähig, aber wir brauchen mehr Bewertung und Erkundung, um herauszufinden, was er wenig oder nicht tut. »