Laut einem Team der University of California, Los Angeles, war chatgpt in 84 % der radiologischen Forschungsstudien wirksam, dennoch ist es noch zu früh, um seine vollständige Eignung für klinische Anwendungen zu bestätigen.
Eine Gruppe unter der Leitung von Pedram Keshavarz, MD, führte eine systematische Literaturrecherche durch und stellte fest, dass 37 von 44 (84,1 %) radiologischen Studien die Wirksamkeit von ChatGPT belegen, jedoch keine seine unbeaufsichtigte Verwendung in der klinischen Praxis nahelegte.
„Obwohl ChatGPT das Potenzial zu haben scheint, die Radiologie zu revolutionieren, ist es noch zu früh, um seine vollständige Leistungsfähigkeit und Genauigkeit zu bestätigen“, schrieb die Gruppe in einer am 27. April veröffentlichten Studie Diagnostische und interventionelle Bildgebung.
Der Einsatz von ChatGPT hat eine Debatte über die Vor- und Nachteile von KI-Technologien in der klinischen Routinepraxis ausgelöst, einschließlich Bedenken hinsichtlich möglicher Verzerrungen in den Trainingsdaten, die den Einsatz einschränken könnten, so die Forscher.
Zu diesem Zweck führte die Gruppe eine systematische Überprüfung der bis zum 1. Januar 2024 veröffentlichten Studien durch, die über die Leistung von ChatGPT berichteten. Ziel der Forscher war es, die potenziellen Einschränkungen zu identifizieren und zukünftige Richtungen für die Integration und Optimierung zu erkunden.
Die Überprüfung ergab 44 Studien, die die Leistung von ChatGPT bewerteten, wobei 37 eine hohe Leistung meldeten. Davon gaben 24 (54,5 %) den Anteil der Leistung von ChatGPT an: 19 Studien verzeichneten eine mittlere Genauigkeit von 70,5 %, und in fünf gab es eine mittlere Übereinstimmung von 83,6 % zwischen den Ergebnissen von ChatGPT im Vergleich zu den Entscheidungen und/oder Richtlinien von Radiologen Referenzstandards.
Darüber hinaus wurden durch ChatGPT die Entscheidungsprozesse der Radiologen erheblich verbessert (14/20; 70 %), strukturierte und vereinfachte Radiologieberichte (8/8; 100 %), verbesserte Patientenkommunikation und bessere Ergebnisse (5/6; 83,3 %). Radiologieberichte (4/4; 100 %) und durchgeführte radiologische Prüfungen (6/6; 100 %).
Sieben Studien hoben jedoch Bedenken hinsichtlich der Leistung von ChatGPT hervor und stellten bei sechs (6/44; 13,6 %) Ungenauigkeiten bei der Bereitstellung von Informationen zu Diagnose und klinischer Entscheidungsunterstützung und bei einer (1/44; 2,3 %) bei der Patientenkommunikation und Bereitstellung von Inhalten fest.
Letztlich deutete keine der Studien auf einen unbeaufsichtigten Einsatz von ChatGPT in der klinischen Praxis hin, schrieben die Forscher.
Zu den weiteren in den Studien beobachteten Risiken und Bedenken hinsichtlich der Verwendung von ChatGPT gehörten voreingenommene Antworten, eingeschränkte Originalität und die Möglichkeit ungenauer Informationen, die zu Fehlinformationen, Halluzinationen, unzulässigen Zitaten und gefälschten Referenzen, Schwachstellen in der Cybersicherheit und Risiken für die Privatsphäre der Patienten führen könnten, so die Autoren.
„Es ist noch zu früh, um seine vollständige Leistungsfähigkeit und Genauigkeit zu bestätigen, und es sind umfangreichere multizentrische Studien unter Verwendung verschiedener Datensätze und Vortrainingstechniken erforderlich, um die Rolle von ChatGPT in der Radiologie zu überprüfen“, schlussfolgerte die Gruppe.
Die vollständige Studie ist verfügbar Hier.
