Studie: KI-Chatbots antworten regional unterschiedlich auf Nachrichtenfragen

Regionale Disparitäten und Abhängigkeit von Informationsökosystemen

Eine neue Studie hat die Genauigkeit populärer KI-Chatbots bei der Beantwortung von Nachrichtenfragen untersucht und dabei erhebliche regionale Unterschiede festgestellt. Die Antworten der Chatbots variieren demnach stark je nach Region – ein Befund, den die Forscher auf die Abhängigkeit von unterschiedlichen Informationsökosystemen zurückführen. Die Studie zeigt, dass die zugrunde liegenden Informationsökosysteme die Antwortqualität maßgeblich beeinflussen und KI-gestützte Nachrichtenausgaben nicht einheitlich funktionieren. Bereits heute nutzen etwa zehn Prozent der Erwachsenen in den USA KI-Chatbots zumindest gelegentlich für Nachrichten; bei den unter 25-Jährigen weltweit sind es sogar rund 15 Prozent. Das Vertrauen in die Zuverlässigkeit der Antworten ist jedoch oft größer als die tatsächliche Verlässlichkeit: Etwa die Hälfte der US-amerikanischen Nutzer, die Nachrichten auf diesem Weg beziehen, gab an, bereits auf vermeintlich ungenaue Informationen gestoßen zu sein, und rund ein Drittel hatte Schwierigkeiten, wahre von falschen Informationen zu unterscheiden. Diese Diskrepanz verdeutlicht, dass die regional geprägten Informationsökosysteme nicht nur die Antwortinhalte, sondern auch die Wahrnehmung der Nutzer beeinflussen.

Schwächen bei unvollkommenen Eingaben

Die Studie offenbart zudem eine akute Fragilität der Chatbots bei unvollkommenen Prompts. Sobald Nutzerfragen ungenau, mehrdeutig oder fehlerhaft formuliert sind, zeigen die Systeme deutliche Schwächen. Diese Anfälligkeit hat erhebliche Konsequenzen für die Zuverlässigkeit, da Nutzer im Alltag selten perfekt formulierte Fragen stellen. Die Antworten können dann unzuverlässig werden, was das Vertrauen in die Chatbots als Nachrichtenquelle untergräbt. Die Ergebnisse verdeutlichen, dass die Systeme nicht robust genug sind, um mit der natürlichen Variabilität menschlicher Spracheingaben umzugehen. Angesichts der Tatsache, dass bereits viele Nutzer auf KI-Chatbots für Nachrichten zurückgreifen, stellt diese Schwäche ein Risiko für die Verbreitung fehlerhafter Informationen dar. Die akute Fragilität bei unvollkommenen Prompts bedeutet, dass die Chatbots in alltäglichen Nutzungsszenarien oft versagen, was ihre Eignung als verlässliche Nachrichtenquelle einschränkt. Bereits jetzt berichtet etwa die Hälfte der Nutzer von vermeintlich ungenauen Informationen, was die praktischen Auswirkungen dieser Schwäche verdeutlicht.