Как управлять ожиданиями, отменять задачи и тестировать правильно

Слышали шутку про попугая, который научился говорить «чтобы что» и стал тимлидом? У этого вопроса есть другая форма, которая звучит: «А цифры есть?»

Это один из признаков карго-культа продуктовой культуры. Услышав предложение провести А/В-тест, опытный редактор должен насторожиться.

Цифры нужны, когда на их основе принимается решение, но если цифры нужны, чтобы были цифры, задачу нужно отменить.

Что НЕ тестировать

🍞 Слова в разном порядке, формулировки, «варианты» текстов с одинаковым смыслом, но разными словами

🍞 Не сравнивать конкретику с абстракцией, конкретика всегда будет сильнее, но в тесте внезапно может победить абстракция по принципу 50/50 из анекдота — или встречу динозавра, или нет. Вы эксперты, не забывайте об этом

Что можно тестировать

🍞 Тон-оф-войс: можно сравнить более неформальную подачу, даже слегка напористую с нейтральной и посмотреть какая лучше заходит и в каких случаях

🍞 Сравнивать коммуникации с упором на разные фичи продукта, если есть несколько примерно равнозначных преимуществ

Что делать менеджеру или редактору

Если вам навязывают тестирование ради тестирования, попробуйте поуправлять ожиданиями руководства и коллег. Никто не просит ругаться или вредить себе, просто не брать бесполезные задачи под козырек.

Если видите задачу с тестированием там, где это ненужно, или другую дурацкую задачу, то брать ее в работу не надо, главное аргументировать правильными вопросами. Вот один из них: «Какие решения будем принимать решение на основе цифр из А/В-тестирования?»

#стейкхолдеры