Итальянский регулятор создал важнейший прецедент в борьбе с «галлюцинациями» ИИ

Италия продолжает удерживать статус самого строгого ревизора ИИ. На этот раз антимонопольное ведомство страны (AGCM) добилось от техгигантов (Deepseek, Mistral, NOVA AI) официальных обязательств по обеспечению прозрачности нейросетей (тексты решений и обязательств).

👀Расследование началось из-за того, что компании не информировали пользователей должным образом о рисках, что их чат-боты могут генерировать неточную, вводящую в заблуждение или полностью вымышленную информацию («галлюцинации»). Согласно итальянскому законодательству о защите прав потребителей, отсутствие таких предупреждений мешает потребителю принять взвешенное решение, что особенно критично в сферах медицины, права, финансов.

Главное из решений:
▪️ Теперь предупреждение о галлюцинациях должно быть на видном месте прямо в интерфейсе чата ( под окнами чата в пользовательских интерфейсах добавлены постоянные предупреждения на итальянском языке о риске галлюцинаций, в том числе посредством специальных гиперссылок). Больше нельзя прятать юридические оговорки в глубине Terms of Use, которые никто не читает.
▪️ Регулятор подчеркнул, что пользователь должен знать о рисках до начала взаимодействия, а не после того, как он получил ложный совет.
▪️В DeepSeek согласились инвестировать в технологии для снижения риска «галлюцинаций», признавая при этом, что существующие технологии не могут полностью их предотвратить. NOVA AI согласилась четко разъяснить потребителям, что ее сервис просто предоставляет единый интерфейс для доступа к ряду чат-ботов (каждый из которых описан более подробно), без агрегирования или обработки их ответов.
▪️ У компаний есть около 4 месяцев на внедрение изменений, иначе последуют внушительные штрафы.

❕Италия стала первой страной в ЕС, которая добилась официальных юридических обязательств от ИИ-компаний именно по вопросу галлюцинаций, используя защиту от недобросовестной коммерческой практики, а не просто GDPR, и задала планку стандарта по прозрачности (не просто наличие документа на сайте, а понятная коммуникация с пользователем здесь и сейчас).

#LawAndDisorder #UXWatch
————
@pattern_ai | AI GDPR Navigator