Eine aktuelle Analyse ergab, dass der beliebte Chatbot mit künstlicher Intelligenz (KI), chatgpt, etwa 84 % der Multiple-Choice-Übungsfragen im Rahmen einer allgemeinen augenärztlichen Wissensbewertung korrekt beantwortete.

Frühere Erkenntnisse des Untersuchungsteams der University of Toronto zeigten, dass eine frühere Version des Chatbots im Januar 2023 46 % der Multiple-Choice-Fragen und im Februar 2023 58 % der Multiple-Choice-Fragen richtig beantwortete, was auf das zunehmende Wissen des Chatbots im Laufe der Zeit hinweist.

Um die sich entwickelnde Rolle der KI in der Augenheilkunde besser zu verstehen, schlossen sich drei der Studienforscher an HCPLive um ihre Gedanken zu den Ergebnissen der Studie mitzuteilen und darzulegen, wo sie die zukünftige Rolle der KI sehen.

• Rajeev Muni, MD, MSc, ein vitreoretinaler Chirurg in der Abteilung für Augenheilkunde am St. Michael’s Hospital und Unity Health Toronto
• Marko M. Popovic, MD, MPH, Assistenzarzt in der Abteilung für Augenheilkunde und Sehwissenschaften an der University of Toronto
• Andrew Mihalache, Medizinstudent an der University of Toronto

„Wir können fast in Echtzeit sehen, wie sich dieser KI-Chatbot im Hinblick auf sein ophthalmologisches Wissen weiterentwickelt hat und welche Leistungssteigerungen des Chatbots wir in praktisch jedem Fachgebiet der Augenheilkunde beobachten, von der Hornhaut über das Glaukom bis zur Netzhaut.“ sagte Popovic. „Es gibt noch viel zu tun, aber nähert sich ChatGPT 4 einem Punkt, an dem es Unterstützung bei der Vorbereitung auf die Board-Zertifizierung bieten kann? Es ist immer noch nicht bei 100 %. Aber die dramatischen Fortschritte in so kurzer Zeit lassen mich glauben, dass es in Zukunft Potenzial geben könnte.“

Die Forscher wiesen darauf hin, dass der verbesserte Wissenskorpus des Chatbots der Hauptgrund für den drastischen Anstieg der korrekten Antworten zum Wissen über Augenheilkunde sei, und stellten fest, dass andere Fachgebiete im Laufe der Zeit ähnliche Verbesserungen beobachten könnten, wenn sie untersucht würden.

„Wissen Sie, 100 % sind bei keinem Test durch eine Maschine oder eine Person schwer zu erreichen, aber wenn man sich das Tempo der Verbesserung anschaut, ist das ziemlich bemerkenswert“, sagte Muni. „Und ich denke, dass dies kontinuierlich bewertet werden muss. Wenn neuere Versionen herauskommen und verschiedene Chatbots verfügbar sind, werden wir die verschiedenen vergleichen und sehen, was die positiven und negativen Aspekte sind, aber es scheint auf jeden Fall, dass das Tempo ziemlich dramatisch ist.“

Die Experten diskutierten nicht nur die reinen Fähigkeiten des Chatbots, sondern auch den sich entwickelnden Stellenwert der künstlichen Intelligenz in der Medizin und ihre möglichen Auswirkungen auf die klinische Praxis. Muni verwies auf den Nutzen von Chatbots bei der Ausbildung zur Vorstandszertifizierung, aber auch auf die zunehmende Rolle der KI bei der Verstärkung der klinischen Entscheidungsfindung auf der Grundlage von Bildgebungsparametern.

„Wenn Sie über KI-Algorithmen verfügen, die darauf trainiert sind, Bildgebung zu betrachten, und möglicherweise Biomarker verwenden, die wir mit bloßem Auge möglicherweise nicht sehen, besteht für KI das Potenzial, eine Entscheidungsunterstützung zu ermöglichen, die möglicherweise sogar besser ist als das, was möglich ist.“ Menschen“, sagte er. „Ich denke, dass dies eine Menge Arbeit erfordern wird, um diese Algorithmen für die Verwendung mit unseren gängigen Bildgebungsmodalitäten zu validieren, und ich denke, dass viele Zentren auf der ganzen Welt intensiv in diesem Bereich arbeiten.“

Die Forscher diskutierten aber auch die Grenzen der KI, Probleme mit Fehlinformationen und der Patientenerfahrung sowie das Potenzial für medizinisch-rechtliche Probleme. Sie stellten fest, dass junge Ärzte zu Beginn ihrer Karriere möglicherweise auf ChatGPT angewiesen sind, und schlugen vor, dass der Chatbot ungenaue oder unvollständige Antworten geben und zu einer suboptimalen Versorgung führen könnte.

„Ich denke, die Quintessenz hier ist, dass der KI-Chatbot bei der Diagnose und Behandlung von Patienten letztendlich nicht für das verantwortlich gemacht werden kann, was er liefert, sondern dass letztendlich der Arzt verantwortlich ist“, sagte Popovic. „Und das ist besonders herausfordernd, wenn man ChatGPT nach den Symptomen fragt X Zustand und es liefert 10 Symptome, von denen nur 9 richtig sind.“

Weitere Einblicke der Forscher in die Rolle von künstlicher Intelligenz und ChatGPT in der Augenheilkunde finden Sie im vollständigen Interview.

Relevante Offenlegungen für Dr. Muni umfassen Abbvie, Bausch+Lomb, Novartis, Roche und andere.

Verweise

1. Der Chatbot mit künstlicher Intelligenz von Iapoce C. scheint die ophthalmologische Wissensbewertung zu verbessern. HCP Live. 18. Juli 2023. Zugriff am 11. August 2023. https://www.hcplive.com/view/artificial-intelligence-chatbot-appears-improve-ophthalmic-knowledge-assessment.
2. Mihalache A, Huang RS, Popovic MM, Muni RH. Leistung eines aktualisierten Chatbots mit künstlicher Intelligenz zur Bewertung des ophthalmologischen Wissens. JAMA Ophthalmol. Online veröffentlicht am 13. Juli 2023. doi:10.1001/jamaophthalmol.2023.2754