Angesichts der Tatsache, dass künstliche Intelligenz (KI) ein grundlegender Bestandteil der klinischen Forschung und Entscheidungsfindung werden wird, stellen viele immer noch die Genauigkeit von chatgpt in Frage, einem hochentwickelten KI-Sprachmodell zur Unterstützung komplexer Diagnose- und Behandlungsprozesse.

Eine neue Studie, die auf dem diesjährigen ESCMID Global Congress (ehemals ECCMID) in Barcelona (Spanien) (27.-30. April) vorgestellt wurde und in der ChatGPT mit der ESCMID-Richtlinie für die Behandlung von Hirnabszessen verglichen wurde, kam nun zu dem Ergebnis, dass ChatGPT zwar in der Lage zu sein scheint, zu helfen Empfehlungen zu wichtigen Fragen zu Diagnose und Behandlung In den meisten Fällen könnten einige der Antworten des KI-Modells Patienten gefährden.

Die Studie wurde von Mitgliedern der ESCMID Study Group for Infectious Diseases of the Brain (ESGIB) durchgeführt und im Journal of Neurology veröffentlicht.

„Alles unter 100 % ist ein Misserfolg, wenn es um die Patientensicherheit geht“, sagt Autorin Dr. Susanne Dyckhoff-Shen vom LMU-Universitätsklinikum München in Deutschland und Mitglied von ESCMID. „Obwohl wir von ChatGPTs Wissen über die Behandlung von Hirnabszessen erstaunt sind, gibt es einige wesentliche Einschränkungen bei der Verwendung des KI-Modells als medizinisches Gerät, einschließlich möglicher Schäden für den Patienten und mangelnder Transparenz darüber, welche Daten für die Bereitstellung von Antworten verwendet werden.“ .”

Die Fähigkeit der KI, riesige Datensätze schnell zu assimilieren, zu verarbeiten und zu interpretieren, bietet verlockende Aussichten. Aber sind zeitaufwändige Prozesse zur Erstellung medizinischer Leitlinien weiterhin notwendig, oder könnten KI-Modelle, die auf einer Fülle wissenschaftlicher medizinischer Literatur trainiert wurden, mit klinischen Experten bei der Beantwortung komplexer klinischer Fragen konkurrieren?

Hirnabszesse sind eine potenziell lebensbedrohliche Infektion des zentralen Nervensystems (ZNS), die eine sofortige Erkennung und Behandlung erfordert, um schwere neurologische Komplikationen und sogar den Tod zu verhindern.

In der Vergangenheit orientierte sich die Behandlung von Hirnabszessen weitgehend an klinischer Erfahrung und begrenzten Studien, doch im Jahr 2023 erfüllte ESCMID den Bedarf an einem standardisierten Ansatz durch die Entwicklung einer internationalen Leitlinie [1].

Um herauszufinden, ob ChatGPT in der Lage ist, medizinische Forschung professionell zu bewerten und wissenschaftlich fundierte Empfehlungen zu geben, hat ein europäisches Forscherteam das KI-Modell daraufhin getestet, ob es im Vergleich zum ESCMID präzise Antworten auf zehn Schlüsselfragen zur Diagnose und Behandlung von Hirnabszessen liefern kann Richtlinie.

Zunächst baten die Forscher ChatGPT (Version 4), ohne zusätzliche Informationen zehn Fragen zu beantworten, die vom ESCMID-Komitee für ihre Hirnabszess-Leitlinie entwickelt und bewertet worden waren.

Anschließend wurde ChatGPT zusätzlich mit dem Text derselben wissenschaftlichen Forschungsartikel vorbereitet, die zur Entwicklung der Leitlinie verwendet wurden, bevor dieselben Fragen gestellt wurden. Dies wurde durchgeführt, um zu sehen, ob ChatGPT besser abgestimmte Empfehlungen liefern kann, wenn dieselben Daten vorliegen, die für die Leitlinienentwicklung verwendet wurden.

Die von der KI generierten Antworten wurden dann von drei unabhängigen Experten für infektiöse ZNS-Erkrankungen mit den Empfehlungen der ESCMID-Leitlinie auf ihre Klarheit, Übereinstimmung mit der Leitlinie und das Patientenrisiko verglichen.

Klare Antworten auf die meisten wichtigen Fragen