Аналитика для самых маленьких

Фича, которую можно было сделать проще

В приложении Сбера есть возможность скрыть баланс одним нажатием на кнопку. В отличие от других банков…

Например, в Яндекс Пей и в Т-банке решили сделать иначе: пользователю надо или перевернуть телефон, чтобы скрыть баланс, или зайти в настройки

Причем если в Сбере ты один раз нажал на кнопку «скрыть» и при следующем заходе эта настройка сохраняется, то в остальных двух банках махать ручками нужно будет при каждом заходе 👐


➖➖➖➖➖

📎Как можно настроить метрику для этой функции: через Tag Manager такую механику корректно отследить будет непросто, поэтому логичнее попросить разработчиков заранее добавить отдельное событие

📎Какую метрику считаем:

1️⃣сколько пользователей воспользовались функцией
2️⃣я бы еще отслеживала, насколько пользователи довольны этой функцией

Написала пост про Abandonment Rate, а потом подумала: «наверное, мало кому будет интересна эта метрика, так как все привыкли смотреть на Conversion Rate»

Но иногда гораздо полезнее понять, где именно пользователи начали уходить. Поэтому все же делюсь 👇

Abandonment rate

Доля пользователей, которые начали какое-то действие, но в итоге не завершили его

На каком шаге пользователи начинают уходить из изначально запланированного сценария?

С помощью метрики можно:

🟡понять, на каком этапе пользователю уже тяжело идти дальше: он устал или запутался
🟡найти лишние действия и упростить сценарий
🟡оценить, как некоторые изменения повлияли на результат


Самый яркий для меня пример, когда эту метрику правильно было бы отслеживать:

Банковские приложения

После санкций банковские приложения регулярно исчезают. Пользователям становится не так просто скачать их. Скорее всего, многие из вас уже не раз скачивали новую версию приложения Сбера ✅

Считаем:

⬇️сколько скачали приложение, но в итоге не зашли и не авторизовались?

⬇️сколько дошли до авторизации, а сколько закрыли приложение раньше?

У меня появился whoop

И там столько аналитики, что я каждый день залипаю в приложении

Это один из лучших примеров того, как можно визуализировать сложную информацию. Плюс есть возможность делиться отчетами с уже настроенными графиками и показателями 🤌

И еще мне нравится видеть цифру 26 (система так определила). Сразу ощущаю себя моложе

💸 VS 🧠

Никогда не задумывались, почему многие специалисты выбирают Яндекс, хотя зарплаты там далеко не всегда самые высокие?

Ведь можно заработать больше в Авито, Сбере, Т-Банке и других крупных компаниях. А конкурс в Яндекс при этом остается одним из самых высоких. Хотя пройти интервью - это отдельный квест. После первого этапа легко начать сомневаться в себе

Вот мое непопулярное мнение👇

Знания важнее, чем то, сколько ты получаешь денег. Особенно в первый год работы в команде. И многие специалисты уходят в Яндекс ради опыта, а не денег. И это очень умный ход, потому что в итоге через несколько лет у них будет сильное конкурентное преимущество. Яндекс давно сформировал репутацию компании, в которой можно быстро вырасти как специалист. Важно! Я не говорю, что сотрудник Т-банка не получает опыт и просто сидит на месте (но это не точно). Ему просто будет сложнее продать себя на рынке

💡Теперь представьте два сценария

Первый: вы идете работать бесплатно в компанию, где за год получаете ценный опыт, после чего можете претендовать на широкий круг интересных позиций, где также сможете диктовать рынку любые зарплатные ожидания

Второй: вы сразу выбираете место с более высокой зарплатой, но скорость профессионального роста оказывается ниже

Какой вариант выберете?

Фатальная ошибка - исправить опечатку в тексте предыдущего поста. Без права восстановления из-за глюка в Telegram. Да-да!

📎 Ниже пост про метрику Rage Click Rate. Хочу его видеть у себя в канале

Rage Click Rate

Мое любимое занятие - искать ошибкиии. Как только вижу, что кнопка не работает, сразу бегу кошмарить коллег)

Метрика показывает, как часто пользователи нажимают на один и тот же элемент интерфейса или область страницы за короткий промежуток времени ☝


🗂Зачем нужна?

1. Помогает находить нерабочие кнопки и другие элементы интерфейса

2. Показывает места, где пользователи интерпретируют интерфейс иначе, чем задумано. Например, считают элемент кликабельным, хотя он таким не является



🗂Как можно отслеживать?

1. Записи пользовательских сессий
В Яндекс Метрике есть такой отчет. В свое время он помог нам найти и исправить несколько проблем в форме заявки

2. Тепловые карты
Позволяют быстро увидеть зоны, где пользователи чаще всего пытаются взаимодействовать с интерфейсом. В Яндекс Метрике тоже есть такой отчет

3. Настройка отдельного события
Например, фиксировать 3-5 кликов по одному элементу за короткий промежуток времени. Такой подход помогает быстрее выявлять проблемные места и рассчитывать сам показатель. А в связке с записями сессий становится гораздо проще понять причины поведения пользователей

📎 А тут ссылка на фильм «Plata за риск» с Олегом Тиньковым

Рискуйте!
И хорошего вечера 🧡

https://youtu.be/pWwQmikOoqg?si=kjCBzbbQ1TihzcUE

Rage Click Rate

Мое любимое занятие - искать ошибкиии. Как только вижу, что кнопка не работает, сразу бегу кошмарить коллег)

Метрика показывает, как часто пользователи нажимают на один и тот же элемент интерфейса или область страницы за короткий промежуток времени

🗂Зачем нужна?

1. Помогает находить нерабочие кнопки и другие элементы интерфейса

2. Показывает места, где пользователи интерпретируют интерфейс иначе, чем задумано. Например, считают элемент кликабельным, хотя он таким не является



🗂Как можно отслеживать?

1. Записи пользовательских сессий

В Яндекс Метрике есть такой отчет. В свое время он помог нам найти и исправить несколько проблем в форме заявки

2. Тепловые карты

Позволяют быстро увидеть зоны, где пользователи чаще всего пытаются взаимодействовать с интерфейсом. В Яндекс Метрике тоже есть такой отчет

3. Настройка отдельного события

Например, фиксировать 3-5 кликов по одному элементу за короткий промежуток времени. Такой подход помогает быстрее выявлять проблемные места и рассчитывать сам показатель. А в связке с записями сессий становится гораздо проще понять причины поведения пользователей

Мы не проводим А/B-тесты, но чтобы хотя бы немного в этой теме шарить, я стараюсь что-то читать…

Во-первых, вопросы про тесты часто встречаются на собеседованиях
Во-вторых, даже если вы не запускаете тесты самостоятельно, полезно понимать базовую логику: как формулируются гипотезы, как выбираются метрики, что такое p-value, почему нельзя останавливать эксперимент раньше времени и так далее 🔁

Изучая материалы коллег и различные статьи, собрала за последние пару недель несколько полезных ресурсов. Сохраняйте!

⤵️


1️⃣ Инструменты для A/B экспериментов

Тут есть калькуляторы для оценки размера выборки, длительности эксперимента, MDE и других задач, которые постоянно возникают при планировании тестов

2️⃣ Подборка статей по A/B-тестированию

В посте ссылки на кейсы компаний, которые проводят эксперименты

3️⃣ Хэндбук от Trisigma - платформа для тестов от Авито: @trisigma_avito_bot

Ну тут с нуля все разжевывают. Джунам точно будет полезно

«Зачем нужны A/B-тесты, если я и так все знаю»

Последний месяц я хочу удариться об рабочий стол и ничего не чувствовать. Работа с новым заказчиком сильно изматывает

Но вот что я за это время поняла:

🌸Если заказчик не приходит к тебе со своим планом и ожиданиями по метрикам, значит, он забил на это, и в конце тебе придется по несколько раз объяснять очевидные вещи: «почему такая низкая конверсия?»

💙То же самое происходит, когда команда не хочет проводить тесты и ждет вау-эффекта от своей «гениальной идеи». Без каких-либо доказательств того, почему это вообще должно было сработать

💙Когда просишь заказчика описать задачу, а он описывает ее через одно место, в следующий раз проще сразу поставить встречу на 10 минут, все проговорить и сделать задачу за то время, которое было изначально запланировано. Потому что потом оказывается: «я не это имел(а) в виду»

💙Я хейчу команды, которые после создания витрины данных не описывают таблицы и поля. Или описывают их так, как сами чувствуют

Почему у вас низкая конверсия?

Почему при переходе на другой сайт конверсия почти всегда ниже, чем если бы вы просто оставили пользователя в покое ⚜️


Пример: вы запускаете рекламу и хотите, чтобы хотя бы 10% пользователей дошли до другого сайта и оставили там заявку. Мечтать не вредно

Если вы не продумали все до мелочей, как и что будет делать ваш клиент на другом сайте, не ждите высокой конверсии

А теперь представьте, что перед тем как зайти на сайт, вы его просите еще авторизоваться! 👍

Почему это не работает:

1. Это уже далеко не два клика. Поэтому ожидайте, что пользователь начнет сомневаться или просто уйдет, если поймет, что все слишком сложно

2. Скорее всего вы вообще не контролируете другой сайт. Оперативно отловить или исправить ошибку не получится

〰️
Два примера из нашего приложения

Боль аналитика, когда он слышит комментарий от заказчика «цифры неправдоподобные, как это cr - 0,0001%». Мой ответ:

🔴вы продумали клиентский путь?
🔴ну хотя бы один раз прошли его?
🔴с чего вы решили, что там вообще может быть конверсия в 1%?

У вас цифры какие-то не такие. Пересчитайте

Каждый раз я убиваюсь в конце квартала. Но не потому что все задачи откладываются в самый последний момент. А потому что почти все заказчики вспоминают про цифры и подводят сами итоги

И ты в этот момент пытаешься спасти себя и коллег…

Ладно бы мы просто собирали данные и отдавали их заказчикам. Заказчик видит результат и понимает, что это не то, что он ожидает увидеть. И тебе приходится защищать себя, свои знания, методологию, расчеты и все, что только возможно 🔪

Но самый классный для меня момент, когда говорят

это неправдоподобно

или же

а вот тут другая команда посчитала и у них по-другому

Хочется сказать «ну и сами считайте». Но это не профессионально, как оказалось

⬛️Про кейс «неправдоподобно» напишу отдельный пост. Об этом стоит рассказать

Ищем аналитиков в команду Авто

Вы думаете, почему тут так тихо. Задач стало больше, а аналитиков почти столько же. Поэтому мы расширяем команду и ищем новых коллег 🙀

Отправляйте резюме! По всем вопросам также пишите мне⤵️
@muremarie


Что предстоит делать:

🔘проводить аналитические исследования рынка и поведения клиентов
🔘формировать и тестировать гипотезы, оценивать эффективность решений
🔘продумывать и описывать ТЗ для автоматизации сбора и обработки данных
🔘строить дашборды и отчёты в BI (Tableau / Power BI / Superset...)
🔘готовить презентации и уметь понятно объяснять сложные вещи
🔘работать в связке с продуктом, маркетингом и бизнесом

⬜️ Меня не взяли в Дом.РФ, потому что я классная

На самом деле они не так сказали. А вот так:

Мы думаем, тебе у нас будет скучно.
А еще мы токсичные

Я прошла первый этап собеса, сделала тестовое задание. А на последней встрече руководитель сказал, что они не смогут мне предложить интересную и перспективную работу 🤩

Меня рассматривали на должность аналитика. Но на последнем этапе их интересовало не то, какой у меня опыт и зачем меня нужно брать в команду, а почему я меняла 3 раза работу в рекламных агентствах. Хотя за плечами 3,5 года работы в Сбере

⚫️ Полтора года я работала в рекламной сфере, прежде чем решила стать аналитиком

Когда директор спросил, почему я меняла каждый раз работу и какие продукты я продвигала в агентствах, я взбесилась и ответила коротко, что нет роста в рекламной сфере и люди чаще всего токсичные попадаются

〰️

Главный вывод, который я сделала после этого собеседования:
⬇️
на последнем этапе с руководством нужно понять - есть ли у вас мэтч

Даже если бы меня взяли на работу, я уже тогда понимала, что лично мне с этим человеком будет сложно, поэтому оно того не стоит