Wissenschaftler der Stanford University und der UC Berkeley entdecktdass sich die Antwortqualität der kostenpflichtigen Version von chatgpt in den letzten Monaten deutlich verschlechtert hat. Sie führten eine vergleichende Analyse der beiden wichtigsten ChatGPT-Sprachmodelle – GPT-4 und GPT-3.5 – zu verschiedenen Arten von Aufgaben im Zusammenhang mit Mathematik, Codierung, visuellem Denken und sensiblen Themen durch.
Drei Wissenschaftler – Matei Zaharia, Lingjiao Chen und James Zou – veröffentlichten eine wissenschaftliche Arbeit mit dem Titel „Wie verändert sich das Verhalten von ChatGPT im Laufe der Zeit?“. Sie entwickelten spezifische Metriken zur Bewertung der Leistungsaspekte der ChatGPT-Sprachmodelle und wandten sie auf GPT-4 und GPT-3.5 an.
Es stellte sich heraus, dass das neueste GPT-4-Modell, das OpenAI vor zwei Wochen als fortschrittlichstes und funktionsfähigstes KI-Modell vorgestellt hatte, nicht einmal Anfragen wie die Bestimmung von Primzahlen bewältigen kann. Die Genauigkeit bei der Lösung dieses Problems sank von 97,6 % im März auf 2,4 % im Juni. Gleichzeitig zeigte GPT-3.5, das für das reguläre ChatGPT (kostenlose Version) verwendet wird, bei einigen Aufgaben eine Verbesserung der Antwortqualität.
Die Qualität der Generierung von Codezeilen hat sich in den letzten Monaten merklich verschlechtert. Darüber hinaus lieferte das alte Modell im März detailliertere Erklärungen dafür, warum es einige sensible Fragen, wie etwa die ethnische Zugehörigkeit der Menschen, nicht beantworten konnte.
Die Forscher hoffen, ihr Projekt langfristig fortzuführen und Veränderungen im ChatGPT-Verhalten zu überwachen. Sie fordern OpenAI außerdem auf, offener und transparenter mit der Qualität seiner KI-Modelle umzugehen und regelmäßig eigene Tests durchzuführen und zu veröffentlichen.
Diese Forschung hat bei ChatGPT-Benutzern und Kunden, die sich für verschiedene Zwecke auf diese KI verlassen, Anlass zur Sorge gegeben. ChatGPT ist ein beliebter Dienst, der es Ihnen ermöglicht, in verschiedenen Sprachen mit KI zu kommunizieren und vielfältige Antworten zu erhalten. Wenn jedoch die Qualität der KI-Antworten weiter abnimmt, könnte dies negative Auswirkungen auf das Leben und die Arbeit vieler Menschen und Organisationen haben. Forscher warnen davor, dass Sie, wenn Sie ChatGPT in Ihrer Arbeit verwenden, Verfahren zur Überwachung der Ergebnisse implementieren müssen, um keine unangenehme Überraschung durch künstliche Intelligenz zu erleben.
▼ Die interessantesten und wichtigsten Neuigkeiten zum Thema unser Kanal in Telegram
