TGViewer
Лаборатория Кобзарева Лаборатория Кобзарева @kobzarev_lab · 2.14K subscribers
Post #179 3.23K
О субъективности «объективных» тестов:

Или «как ДС подъебал исследовал рынок».

Мы с тобой стали свидетелем довольно интересного маркетингового эксперимента, публикации которого я точно не ждал от ребят со словом «корпорация» в названии.

Помнишь баттл двух новых мят? Которые Supermint и Myata ot DS. Сегодня нам рассказали, что на самом деле это была одна и та же мята. Разница только в названии.

Получается, что это был классический A/B тест — один из типов исследования, про которые я рассказывал на последних кампусах. Часть выборки получает один вариант продукта, часть — второй. Дальше собираются разные метрики «что больше зашло» и принимается решение.

Нюанс в том, что обычно метрики собираются по объективным (измеряемым) параметрам: количество кликов/покупок, время нахождения на страницах и т.д.

Но тут собирались оцифрованные субъективные — ответы людей «что им вкуснее». Справедливо, возможно даже показательно — но вот тебе забавная история:

Так вышло, что с самого начала проекта я знал, что это одна и та же мята. Поэтому, когда я приехал курить присланные пачки в лабу Интро, я старался соблюсти чистоту эксперимента как мог.

Одинаковая забивка по весам, замытое оборудование, уровень воды в колбе — и прочие нюансы, которые и так соблюдаются на наших тестах.

Ииииии

Через 15 минут после прогрева две одинаковые забивки одинаковой мяты стали куриться немного по-разному. Более того — колба одного из кальянов стала темнее из-за стекшего сиропа.

Разница в перемешивании пачки? В интенсивности курения? В массе углей на каждой из чаш? Что-то еще?

Да кто его знает. В субъективной оценке вкуса не возможно контролировать все переменные эксперимента — где-то нужно сказать «стоп». И это объясняет разделение рынка на тех, кто топил за тут или иную мяту.

Лично моя мораль истории — разработчикам продукта имеет смысл опираться на объективные оценки характеристик продукта (скоро выпущу про это статью). А покупателям стоит принять погрешность изменений вкуса от забивки к забивке.

И это прекрасно. Немного хаоса в каждый аспект нашего мира, который невозможно пытаться контролировать.

Надеюсь, что ДС выложат больше подробностей кейса и расскажут о выводах эксперимента. Само его освещение уже было смелым само по себе. Тебе вообще как такие движения?

Мята, кстати, получилась хорошей
  • 👍 47
  • 🔥 9
  • ❤ 6
  • 👀 2
  • ❤‍🔥 1
  • 💩 1
More from @kobzarev_lab
  1. Sep 19, 2025Подходы для работы технологом Один из самых частых вопросов, который я слышу после выступл…
  2. Jul 27, 2025Открыта вакансия! Нечасто такое происходит — ищу сотрудника. По классике, перед публикацие…
  3. Jul 12, 2025Нужен твой ассист Для меня, как для разработчика продукции и маркетолога, есть важная штук…
  4. Jul 9, 2025OVERDOSE x HP FUTURA — de parfum Экспресс-обзор на свежую коллабу. Я сейчас нахожусь в HP…
  5. Jun 11, 2025Новая пушка на рынке! И конечно же — это Naша разработка с компанией NAШ. Встречай — полно…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →