KI-Chatbots verzerren die Nachrichten, findet die BBC - sehen Sie, was sie falsch machen

ChatGPT, Copilot, Gemini und Perplexity wurden gebeten, 100 Nachrichten zusammenzufassen. Und so haben sie es gemacht.

Vier große KI-Chatbots produzieren laut einer BBC-Untersuchung "erhebliche Ungenauigkeiten" und "Verzerrungen", wenn sie gebeten werden, Nachrichten zusammenzufassen.

ChatGPT von OpenAI, Copilot von Microsoft, Gemini von Google und Perplexity AI wurden jeweils mit Nachrichteninhalten von der BBC-Website konfrontiert und dann Fragen zu den Nachrichten gestellt.

Der Bericht beschreibt, dass die BBC Chatbots gebeten hat, 100 Nachrichten zusammenzufassen, und Journalisten mit einschlägigem Fachwissen bewerteten die Qualität jeder Antwort.

Den Ergebnissen zufolge wiesen 51 % aller von KI produzierten Antworten zu den Nachrichten erhebliche Probleme auf, während 19 % der von der KI generierten Antworten "sachliche Fehler wie falsche Tatsachenaussagen, Zahlen und Daten enthielten".

Darüber hinaus ergab die Untersuchung, dass 13 % der Zitate aus BBC-Artikeln in irgendeiner Weise verändert wurden, wodurch die "Originalquelle" untergraben wurde oder im zitierten Artikel nicht einmal vorhanden war.

Letzten Monat wurde Apple für seine KI-Funktion Apple Intelligence kritisiert, bei der festgestellt wurde, dass sie die BBC-Nachrichtenberichte falsch darstellt.

Deborah Turness, CEO von BBC News and Current Affairs, reagierte in einem Blogbeitrag auf die Ergebnisse der Untersuchung: "Der Preis für die außergewöhnlichen Vorteile der KI darf nicht eine Welt sein, in der Menschen, die nach Antworten suchen, verzerrte, fehlerhafte Inhalte serviert bekommen, die sich selbst als Tatsachen darstellen. In einer chaotischen Welt kann es nicht sein, dass Verbraucher, die nach Klarheit suchen, auf noch mehr Verwirrung stoßen."

Zu den Fehlern, die im Bericht hervorgehoben wurden, gehörten die folgenden:

• ChatGPT behauptete, dass der Hamas-Vorsitzende Ismail Haniyeh im Dezember 2024 im Iran ermordet wurde, als er im Juli getötet wurde.
• Gemini erklärte, dass der National Health Service (NHS) "den Menschen rät, nicht mit dem Dampfen anzufangen, und empfiehlt, dass Raucher, die aufhören wollen, andere Methoden anwenden sollten". Diese Aussage ist falsch. Tatsächlich empfiehlt der NHS das Dampfen als Methode, um mit dem Rauchen aufzuhören.
• Perplexity zitierte eine Aussage von Liam Paynes Familie nach seinem Tod falsch.
• ChatGPT und Copilot gaben beide fälschlicherweise an, dass die ehemaligen britischen Politiker Rishi Sunak und Nicola Sturgeon noch im Amt seien.

Laut der BBC-Untersuchung wiesen Copilot und Gemini insgesamt mehr Ungenauigkeiten und Probleme auf als ChatGPT und Perplexity von OpenAI.

Darüber hinaus kam der Bericht zu dem Schluss, dass sachliche Ungenauigkeiten nicht das einzige Problem bei der Ausgabe des Chatbots waren. Die KI-Assistenten hatten auch "Schwierigkeiten, zwischen Meinung und Fakten zu unterscheiden, redaktionell zu schreiben und oft den wesentlichen Kontext nicht einzubeziehen".

"Verlage sollten die Kontrolle darüber haben, ob und wie ihre Inhalte verwendet werden, und KI-Unternehmen sollten zeigen, wie Assistenten Nachrichten verarbeiten, zusammen mit dem Ausmaß und dem Umfang der von ihnen produzierten Fehler und Ungenauigkeiten", erklärte Pete Archer, BBC-Programmdirektor für generative KI, in dem Bericht.

Ein Sprecher von OpenAI betonte die Qualität der Ergebnisse von ChatGPT: "Wir unterstützen Verlage und Ersteller, indem wir wöchentlich 300 Millionen ChatGPT-Nutzern helfen, hochwertige Inhalte durch Zusammenfassungen, Zitate, klare Links und Zuschreibungen zu entdecken." Der Sprecher fügte hinzu, dass OpenAI mit Partnern zusammenarbeitet, "um die Genauigkeit der Inline-Zitation zu verbessern und die Präferenzen der Verlage zu respektieren, um die Suchergebnisse zu verbessern".