Стартап Миры Мурати разродился на этой неделе первым постом в блоге. Тема: воспроизводимость ответов LLM.
https://thinkingmachines.ai/blog/defeating-nondeterminism-in-llm-inference/
Где там остаётся недетерминизм, когда все сиды уже зафиксированы. Разбирают неассоциативность сложения чисел с плавающей точкой и прочее.
Прикольно, но задачей на миллиард не выглядит :) Ждём других постов.
Post #4026
7.5K