Доверяй, но

Иногда провалидировать работу ИИ бывает затруднительно. Собственно, я к нему и обращаюсь, чтобы он сагрегировал множество информации и сделал вывод. Если бы я знал, что в одном из источников есть заведомо верный ответ, я бы может и сам его там нашел.

Недавно по рабочей необходимости попросил Клода об интерпретации некоторых законов и подзаконных актов с учетом специфики правоприменения и в условиях легких противоречий между всеми этими вводными. Специально попросил не галлюцинировать и доверять только проверенным источникам.

Благо Клод спрашивает разрешения на многие действия и можно наблюдать за ходом его мысли.
• Сначала он пошел читать Консультант и Гарант. Логично, я бы начал с них же.
• Потом пошел читать на pravo .gov .ru. Тоже ок, в консультанте бесплатно не полные тексты.
• Когда он полез на moskvichmag и iphones. ru, я насторожился.
• Но когда я в списке фетчей увидел ura. news и gazetametro, стало страшно.

И вот поди потом разбери, на основании каких из источников он сделал тот или иной вывод? А вывод он делал. А провалидировать его об источник я не могу, потому что я ровно потому и пошел задавать вопросы Клоду, что я не в состоянии прочитать ФЗ и понять его.

Справедливости ради, юристы дали еще более размытую и сейфовую трактовку, из которой тоже не вполне понятно, а что делать то.
Но, что с Клодом, что с юристами, ответы кроются в диалоге.
Уточняющие вопросы - помогают.
Зависимость ответа от альтернативных формулировок есть и там и там.
Думают и те и другие долго.
Но нашим юристам я пока доверяю больше.