ВайбКодинг с Артемом Кругловым,
выпускник МФТИ, AI-гуру и основатель AnyQuery.
Быстрые лайфхаки: короткие видео с приёмами и трюками
Post #525
381
@vibecodingartem
Showing posts older than #526 · Back to latest
Forwarded from Ivan Zamesin
Forwarded from Rebryk Blog

Forwarded from EDU (Bayram Annakov)

3) При помощи LLM генерируем виртуальных покупателей (типа того, как мы делали с юзерами) и просим их ответить по шкале. НО вот тут зарыта собака: обычно при прямом промптировании LLM на шкалу от 1 до 5, они достаточно плохо это делают (сдвинутые распределения, несоответствующие реальности).
4) Поэтому ресерчеры чуть подкрутили этот шаг: сначала они просят LLM сгенерировать текстовый ответ а-ля "выглядит прикольно, я бы наверное попробовал, если не очень дорого и работает стабильно", а потом по смыслу - специальным методом, который назвали Semantic-Similarity Rating - маппят эти ответы на шкалу. И сразу получилось адекватно - 90%+ корреляция результатов реальных и виртуальных покупателей.
Forwarded from EDU (Bayram Annakov)
Forwarded from Николай Хлебинский
Forwarded from Мысли Рвачева

Forwarded from Ilya Kruglov
Forwarded from e/acc
Forwarded from Pavel Zloi
Forwarded from Artem Kruglov
Forwarded from Тестирование ≠ QA
Forwarded from НейроВайб ИИ // Армен Амирханян

Forwarded from Глеб Кудрявцев — мастер AI
Forwarded from EDU (Bayram Annakov)

Forwarded from НейроВайб ИИ // Армен Амирханян

Forwarded from Мысли Рвачева
