× schließen
Präsentiert die Leistung spezialisierter Gutachter bei der Identifizierung von ChatGPT-generierten wissenschaftlichen Manuskripten im Vergleich zu ursprünglich veröffentlichten Manuskripten in drei Tests, die jeweils zwei Phasen umfassen; die erste Bewertung, die als abstrakte Erkennung bezeichnet wird, und die abschließende Bewertung, die die Einleitung mit Referenzen umfasst. Die Einschätzungen der Gutachter werden durch Farben dargestellt, wobei Rot für „Falsch“ (falsche Identifizierung), Grün für „Richtig“ (genaue Identifizierung) und Gelb für „Unsicher“ (Unsicherheit) steht. Die Gutachter zeigten eine bessere Leistung bei der Identifizierung von ChatGPT-generierten Manuskripten in Test 2 (dem sehr bekannten Thema der steroidresponsiven Meningitis-Arteriitis bei Hunden) im Vergleich zu Test 1 (SARS-CoV-2-Erkennungshunde) und Test 3 (Cannabinoidrezeptoren bei Hunden). Epilepsie), die als weniger vertraute und mäßig vertraute Themen bezeichnet wurden. In der abschließenden Bewertung zeigten die Gutachter in drei Tests eine verbesserte Leistung, was darauf hindeutet, dass die Gutachter ihre Bewertungen verfeinern und genauere Schlussfolgerungen ziehen konnten, indem sie spezifische Informationen und Referenzen einbezogen. Kredit: Grenzen der Veterinärwissenschaft (2023). DOI: 10.3389/fvets.2023.1272755
Seit seiner Einführung im November 2022 hat ChatGPT, ein hochmodernes Sprachmodell, das von OpenAI, LLC in San Francisco, Kalifornien, USA, entwickelt wurde, die Aufmerksamkeit der wissenschaftlichen Gemeinschaft auf sich gezogen. Während die Debatten über die Auswirkungen von ChatGPT auf jeden Aspekt der akademischen Welt weltweit ansteigen, leitet ein Team der Tierärztlichen Hochschule Hannover ein Projekt mit mehreren internationalen Partnern, um die potenziellen Einschränkungen und Vorteile zu untersuchen, die mit der Anwendung von ChatGPT beim wissenschaftlichen Schreiben verbunden sind.
Diese Studie mit dem Titel „ChatGPT und wissenschaftliche Arbeiten in der Veterinärneurologie: Ist der Geist aus der Flasche?“ veröffentlicht in Grenzen der VeterinärwissenschaftSektion Veterinärneurologie und Neurochirurgie, untersucht die Fähigkeit von ChatGPT bei der Erstellung wissenschaftlicher Arbeiten im Bereich der Veterinärneurologie.
Zusammenfassungen und Einführungsabschnitte, einschließlich Referenzen, für drei verschiedene Original-Forschungsarbeiten und ChatGPT-generierte Arbeiten in der Veterinärneurologie wurden mithilfe von KI-Ausgabedetektoren und Plagiatsdetektoren ausgewertet. Dreizehn staatlich geprüfte Neurologen wurden außerdem gebeten, die Originalität und Vertrauenswürdigkeit des Inhalts zu beurteilen.
„Wir freuen uns sehr, dass diese Arbeit zu Beginn des akademischen Jahres veröffentlicht wurde. Wie jede andere Technologie kann ein KI-Tool wie ChatGPT je nach Verwendungszweck entweder eine Bedrohung für die wissenschaftliche Integrität und Transparenz darstellen oder Forschern helfen. Ich empfehle es dringend.“ „Die Integration der Bildung sowohl zum richtigen Einsatz als auch zum potenziellen Missbrauch von KI-basierten Werkzeugen in der Wissenschaft als grundlegender Aspekt guter wissenschaftlicher Praxis“, sagt Samira Abani, Erstautorin von der Tierärztlichen Hochschule Hannover.
Jasmin Neßler, korrespondierende Autorin von der Tierärztlichen Hochschule Hannover, kommentiert: „Wir glauben, dass die Popularität der KI eine interdisziplinäre wissenschaftliche Zusammenarbeit erfordert, um klare Richtlinien für ihren verantwortungsvollen Einsatz zu etablieren und Integrität und Transparenz in der veröffentlichten Literatur sicherzustellen. Ein Verbot von KI-Tools ist möglicherweise nicht möglich.“ immer der wirksamste Ansatz sein, um Missbrauch vorzubeugen; stattdessen sollten wir diese Chance nutzen, um das Potenzial von KI zum Wohle der Gesellschaft zu nutzen.“
Prof. Holger Volk, Leiter der Klinik für Kleintiere an der Tierärztlichen Hochschule Hannover, fügt hinzu: „Wir haben gelernt, dass Large Language Models (LLMs) wie ChatGPT darauf trainiert sind, menschliche Schreibstile nachzuahmen und kohärente, plausibel klingende Texte zu produzieren.“ , was manchmal menschliche Experten täuschen kann. Modelle wie ChatGPT neigen jedoch zu Halluzinationen und können voreingenommene Inhalte erzeugen.“
„Dies wirft Bedenken hinsichtlich der Integrität der Verwendung solcher Modelle beim wissenschaftlichen Schreiben auf. Wir müssen bedenken, dass wir trotz der jüngsten Fortschritte zumindest vorerst skeptisch sein sollten, uns vollständig auf ChatGPT oder andere KI-Tools zu verlassen.“
Mehr Informationen: Samira Abani et al., ChatGPT und wissenschaftliche Arbeiten in der Veterinärneurologie; Ist der Geist aus der Flasche?, Grenzen der Veterinärwissenschaft (2023). DOI: 10.3389/fvets.2023.1272755
Provided by
Stiftung Tierärztliche Hochschule Hannover
