Eine neue Studie der Stanford University ergab, dass ChatGPT bei der Beantwortung von Anfragen von Patienten mit Augenerkrankungen tatsächlich genauso gut war wie Augenärzte. Die Ergebnisse wurden am 22. August in JAMA Network Open veröffentlicht.

Die Forscher sammelten 200 Fragen zur Augenpflege in Online-Foren und stellten sie ChatGPT, und dann überprüften acht Augenärzte die Antworten. Nur etwa 60 % der Antworten wurden korrekt als KI- oder menschliche Antworten identifiziert. Mit anderen Worten: Für Ärzte ist es schwierig zu unterscheiden, ob die Antwort von einer KI oder einem Menschen kommt.

Darüber hinaus unterschied sich die Fehlerquote von ChatGPT nicht wesentlich von der der Augenärzte. Die Wahrscheinlichkeit, dass ChatGPT-Antworten falsche oder unangemessene Inhalte enthielten, lag bei 77,4 % und die Wahrscheinlichkeit menschlicher Antworten bei 75,4 %. Keine der Antworten würde jedoch großen Schaden anrichten. 86,5 % bzw. 84 % der ChatGPT- und menschlichen Antworten glaubten, dass dies unwahrscheinlich sei Schaden anrichten. Der Anteil potenziell schädlicher Informationen beträgt lediglich 12,6 % bzw. 15,1 %, der Anteil eindeutig schädlicher Informationen ist mit jeweils 0,9 % sogar noch geringer.

Allerdings gerät ChatGPT immer noch gelegentlich in Verwirrung und gibt „irreführende“ Antworten. Auf die Frage, ob eine Kataraktoperation das Auge „verkleinern“ könne, antwortete ChatGPT, dass die Entfernung des Katarakts zu einer Verkleinerung des Auges führen kann. Allerdings kann die Entfernung des Katarakts zu einer Verkleinerung des Auges führen. Nach Katarakt Sie wird in der Regel durch eine künstliche Linse ersetzt, die keine Veränderung der Augengröße zur Folge hat (Anmerkung).

Professorin Sophia Y. Wang, die die Forschung leitete, sagte, dass die Qualität überraschend gut war, als die augenmedizinischen Fragen aus den Online-Foren für medizinische Beratung von Menschen in ChatGPT eingegeben und die Antworten ausgewertet wurden, insbesondere wenn einige Fragen sehr lang und komplex waren. Aber die Antwort ist immer noch beeindruckend. Wenn man zur Behandlung in große Krankenhäuser geht, sind die langen Schlangen der Menschen, die auf die Behandlung warten, entmutigend, und manche Menschen mögen die „effiziente“ Behandlungsgeschwindigkeit des Arztes nicht. Bevor Sie eine medizinische Behandlung in Anspruch nehmen, möchten Sie möglicherweise mit ChatGPT über den Zustand „sprechen“. In der Regel wird ChatGPT rational analysieren und Methoden bereitstellen und Sie daran erinnern, sich von einem professionellen Augenarzt behandeln zu lassen, wenn sich der Zustand nicht bessert.

Hinweis: Der Autor hat ChatGPT die gleiche Frage noch einmal gestellt und die erfundene Antwort existiert nicht mehr.

(Erste Bildquelle: Shutterstock)