Analyse der Propagandaresistenz von KIs

Claude mit Bestwerten, Mistral mit großen Defiziten: Das Institute of the Estonian Language untersuchte LLMs hinsichtlich ihrer Fähigkeiten, 14 zentrale Narrative russischer Propaganda als solche aufzudecken. Die KI-Antworten auf die Eingabe der Narrative wurden als “neutral”, “biased” oder “malicious” klassifiziert, um anschließend die verschiedenen Modelle zu bewerten. Von 60 getesteten KIs belegt Mistral dabei den 47. Platz, da der Chatbot die russischen Narrative nur in 40 % der Fälle als solche erkannte. Sieben der ersten zehn Plätze belegten verschiedene Versionen von Claude.