Das Australian Bureau of Statistics (ABS) „lebt und atmet“ die KI-Revolution, erklärte ein Regierungsminister, als er erklärte, wie ein Projektteam 1.600 Stunden manuelle Arbeit einsparte, indem es ChatGPT zum Verfassen hochwertiger ANZSCO-Stellenbeschreibungen verwendete.

Eine Auffrischung der Australische und neuseeländische Standardklassifikation der Berufe (ANZSCO)-Datensatz – der im Laufe der Zeit immer detaillierter wurde, da er die einzelnen Aufgaben von Spezialisten in 1.076 Berufen dokumentiert – war schon immer eine „bedeutende Aufgabe“, sagte der stellvertretende Minister für Beschäftigung Dr. Andrew Leigh erzählt der jüngste Datengipfel der australischen Regierung in Canberra.

„Denken Sie einfach darüber nach, eine diskrete Liste der Schlüsselaufgaben in Ihrem Job zu erstellen und diese mit mehr als tausend Arbeitsplätzen in der gesamten Wirtschaft zu multiplizieren“, sagte Leigh – ein selbsternannter „Statistik-Nerd“, der die ministerielle Aufsicht über das ABS hat – sagte.

Um herauszufinden, ob generative KI-Technologie (genAI) ihre Arbeit unterstützen könnte, bereiteten ABS-Datenwissenschaftler eine ChatGPT-Eingabeaufforderung mit 480 Wörtern vor, um ihr das Format und den Stil der vorhandenen ANZSCO-Beschreibungen beizubringen.

Bei iterativen Tests überarbeitete das ABS-Team die Eingabeaufforderung und verwendete dann einen Algorithmus, um die Qualität der Antworten des genAI-Systems zu bewerten, wobei Leigh „Toleranzniveaus in Bezug auf Präzision und Erinnerung“ nannte.

Durch eine Reihe von Iterationen verbesserte sich die Qualität der ChatGPT-Ausgaben bis zu dem Punkt, an dem sie bei beiden Schlüsselkennzahlen konstant rund 69 Prozent erreichte – eine Ausgabe, die so gut war, dass ANZSCO-Analysten bei der Aufgabe, zu unterscheiden, ob eine Stichprobe von Eingabeaufforderungen von Menschen geschrieben wurde oder nicht ChatGPT, zwei Drittel konnten den Unterschied nicht erkennen.

„Die Ergebnisse von ChatGPT waren nicht perfekt“, sagte Leigh, „aber sie boten ABS-Analysten genügend Ausgangspunkt, um sie zu überprüfen und darauf aufzubauen.“

Durch den Einsatz von genAI für das Projekt konnte das Team rund 1600 Stunden einsparen und „eine etwa siebenfache Kapitalrendite“ erzielen.

Der Beweis liegt in der Eingebung

Die ANZSCO-Aktualisierung, bei der vorgeschlagene Änderungen an den bis zur Jahresmitte getesteten Auflistungen und eine umfassende Aktualisierung bis zum Jahresende abgeschlossen sein werden, ist nur ein Beispiel dafür, wie Regierungsbehörden mit der Macht, den Eigenheiten und Sicherheitsrisiken von genAI umgehen Technologie, die sowohl als bahnbrechender Motor des nationalen Wachstums als auch als Wermutstropfen in Sachen Wahrheit und Integrität begrüßt wurde.

Vor dem Hintergrund der Vorsicht, bei der risikoreiche Anwendungen von KI priorisiert werden, obwohl Regierungsbehörden mit GenAI-Produktivitätstools experimentieren, ändern Fallstudien über erfolgreiche Anwendungen langsam die zunächst konservativen Ansätze für die Einführung der Technologie in der Regierung.

Alle ChatGPT-Ergebnisse, so Leigh, seien anhand von vier Kriterien bewertet worden – Qualität, Ethik, Legalität und Sicherheit –, die die Gewissheit gegeben hätten, dass der Ansatz des ABS-Teams „den Platz des Menschen im Mittelpunkt der Entscheidungsfindung gewahrt“ habe.

Da erfolgreiche genAI-Projekte weitere Anwendungen hervorbringen, geht Leigh davon aus, dass die Technologie in Verbindung mit Big-Data-Anwendungen breiter eingesetzt wird, beispielsweise bei der laufenden Analyse von Einkaufsgewohnheiten – seit 2011 sammelt das ABS detaillierte Supermarktkassendaten, um wöchentliche Einblicke in die zu gewinnen sich veränderndes Konsumverhalten der mehr als 10 Millionen Haushalte Australiens.

„Das ABS setzt seine Arbeit an der Modernisierung der Erhebungsmethoden fort, um qualitativ hochwertige und detaillierte Haushaltsausgabendaten zu sammeln“, erklärte Leigh und wies darauf hin, dass frühe GenAI-Proofs of Concept „den Weg für die weitere ABS-Einführung von KI-Technologien“ in Regierungsanwendungen ebnen werden Er sagte: „KI und Big Data können dabei helfen, Daten produktiv, sicher und verantwortungsvoll zu strukturieren und zu sammeln.“

„Die aktuellen Revolutionen in den Bereichen KI und Big Data in der nationalen Statistik sind nicht nur deshalb gut, weil sie neue, hochmoderne Technologien nutzen“, sagte er.

„Sie sind wichtig, weil sie der australischen Regierung eine Möglichkeit bieten, unsere Verwaltungspraktiken und damit die Art und Weise, wie wir allen Bürgern etwas bieten, zu verbessern.“