Как оценить эффективность редизайна?

Мы нашли интересный кейс от сервиса GitLab. После неудачного редизайна страниц с настройками у них возникла необходимость их доработать. Проблема заключалась в том, что контент оказался скрыт за раскрываемыми блоками. Подписи блоков были неинформативными, и в поисках нужной настройки пользователям приходилось раскрывать каждый из них.

Разработчики сервиса решили улучшить одну из страниц. Они вынесли наверх самые частотные опции, которые обычно ищут пользователи и переписали надписи на остальных раскрываемых блоках.

Чтобы оценить эффект от изменений, они использовали метод First Click Test: при помощи специального сервиса показывали одной группе респондентов скриншот новой страницы, а второй — старой страницы, и спрашивали, куда бы они нажали, чтобы выполнить определенное задание. Оказалось, что в двух заданиях из трех новая страница превосходит старую: количество правильных кликов было вдвое выше. Таким образом, разработчики получили количественное доказательство того, что всё сделали правильно.

Сам автор кейса пишет, что в данном случае он использовал First Click Test, чтобы проверить эффективность уже внедренных изменений, но вообще правильнее и эффективнее использовать этот метод до внедрения — в тот момент, когда появляются первые макеты первого экрана. Причем преимущество FCT заключается в том, что он позволяет провести исследование и получить первые результаты буквально за день.

Вот здесь можно прочитать кейс (на английском)

Отличный кейс использования FCT и правильные выводы. FCT и другие методы быстрой оценки юзабилити подойдут всем командам, у которых нет времени на полноценные юзабилити-исследования — например тем, кто работает по методологии Agile. В России сервис для быстрых исследований делает Опроссо, например.

Если вам интересна эта тема, то вот здесь мы подробно описываем (на примере банков), почему отказаться от юзабилити-исследований нельзя и какие быстрые методы бывают.