Європейський ІІ-стартап Mistral провалив тест на стійкість до російської пропаганди

Згідно з дослідженням Інституту естонської мови, Mistral зайняв лише 47-ме місце з 60 у тесті на розпізнавання російської пропаганди. Навіть найсучасніша версія Mistral набрала менше 40% у тестах на розпізнавання шкідливої пропаганди.

Дослідники протестували моделі за допомогою 75 запитань англійською, російською та естонською мовами, які стосувалися 14 тем, характерних для російської пропаганди. Серед них — твердження про те, що Росія «рятувала» українських дітей, що НАТО порушило обіцянки не розширюватися на схід.

Директор інституту Арві Тавасте заявив, що результати підкреслюють вразливість відкритих моделей у порівнянні з комерційними. Mistral у відповідь вказала, що дослідження тестувало «сирі» моделі до їх налаштування клієнтами.

Висновки дослідження мають практичне значення для урядів, які обирають постачальників ШІ. Паралельно, за даними Digital Forensic Research Lab, обсяг російської пропаганди зріс з кількох десятків матеріалів на день у 2023 році до майже 10 тисяч сьогодні.

Джерело: The Insider