chatgpt kann Patientenfragen zum Strahlenschutz bei medizinischen Bildgebungsuntersuchungen ähnlich gut beantworten wie Websites von Radiologieinstituten. Dies geht aus einer am 25. Juni in Radiologie.
Ein Team unter der Leitung von Dr. Sofyan Jankowski vom Universitätsspital Lausanne in der Schweiz konnte keinen statistisch signifikanten Unterschied zwischen den Antworten von ChatGPT und denen auf den Websites von Radiologieinstituten feststellen. Obwohl es einige deutliche Unterschiede in Bezug auf den Wortreichtum gab, zeigten die Ergebnisse die Gesamtleistung von ChatGPT in dieser Anwendung.
„Die Implementierung von ChatGPT könnte dem Bedarf an klaren und zugänglichen Informationen zum Strahlenschutz gerecht werden“, schreiben die Autoren.
Um die Antworten von ChatGPT zum Thema Strahlenschutz auszuwerten, sammelten die Forscher zunächst 12 Patientenfragen zum Thema Strahlenschutz, die sie auf Websites von Radiologieinstituten gefunden hatten. Sie stellten ChatGPT dieselben Fragen und rekrutierten dann 12 Experten (vier Radiologen, vier Medizinphysiker und vier Röntgenassistenten) aus den USA und Europa, um beide Antwortsätze auszuwerten, ohne die Quelle zu kennen.
Diese Leser analysierten die Antworten auf wissenschaftliche Angemessenheit, öffentliches Verständnis und allgemeine Zufriedenheit auf einer Likert-Skala von 1 (Nein) bis 7 (Ja). Darüber hinaus wurden sie auf derselben Likert-Skala gefragt, ob der Text von einer KI generiert wurde oder nicht.
| Medianwerte der Antworten auf Patientenfragen zum Strahlenschutz in der Radiologie | ||
|---|---|---|
| Institutionelle Websites zur Radiologie | ChatGPT | |
| Wissenschaftliche Angemessenheit | 5.4 | 5.6 |
| Allgemeines öffentliches Verständnis | 5.6 | 5.1 |
| Allgemeine Zufriedenheit | 5.1 | 4.7 |
Keiner dieser Unterschiede erreichte statistische Signifikanz.
Die Forscher stellten jedoch fest, dass die Bewertungen hinsichtlich der Wahrnehmung, ob die KI die Antwort generiert hatte oder nicht, erheblich voneinander abwichen (p = 0,02). Sie berichteten, dass die Bewerter 88 (61 %) von 144 Berichten mit hoher Sicherheit als von ChatGPT generiert identifizierten, verglichen mit 43 % (62 von 144), die von Menschen erstellt wurden (p
Weitere Ergebnisse: Die Antworten von ChatGPT hatten im Durchschnitt 268 Wörter, verglichen mit 173 Wörtern bei den von Menschen generierten Antworten. Dieser Unterschied war laut dem Team, zu dem David Rotzinger, MD, PhD, und Chiara Pozzessere, MD – beide ebenfalls vom Universitätsspital Lausanne – sowie Co-Seniorautor Francesco Ria, PhD, vom Duke University Health System gehörten, ebenfalls statistisch signifikant (p = 0,08).
Einige der Bewerter kritisierten die von ChatGPT generierten Texte auch in den Bereichen Antwortformat und Sprache, Relevanz sowie irreführende oder fehlende wichtige Informationen.
Die Forscher wiesen allerdings darauf hin, dass die Kommunikation zum Thema Strahlenschutz zwar unverzichtbar sei, „aber häufig in einer komplexen Sprache verborgen bleibt, die das medizinische Fachpersonal nicht ohne Weiteres vereinfachen kann, was zu unzureichenden Informationen führt.“
„Eine praktische Anwendung könnte darin bestehen, ChatGPT oder andere KI-Chatbots in Wartezimmern von Radiologien bereitzustellen, um Patienten während des Wartens auf ihre Untersuchungen Zugang zu Informationen zu ermöglichen“, schrieben sie. „Es ist wichtig zu beachten, dass dies die Kommunikation zwischen Gesundheitsdienstleistern und Patienten ergänzen und nicht ersetzen sollte.“
Die vollständige Studie finden Sie Hier.
