Что делают компании, проводя A/B тесты?

1. Собирают выборку пользователей, которые будут в A-группе (контрольной, где нет изменений в кнопке) и в B-группе (тестовой, где есть изменения в условной кнопке).

2. Проводят эксперимент, выбирают определенный промежуток времени в течение которого будут фиксироваться результаты.

3. Проверка гипотез, статистическая оценка (это можно посмотреть в курсе по статистике от Карпова, который я прикреплял до этого)

Стоит уточнить, что существует большое количество методов проведения A/B тестов, ссылку прикреплю ниже (интервью с аналитиком в VK)

Полезные материалы для A/B тестеров:

Полезные материалы для A/B тестов

Как проводят A/B тестирование в AVITO

Краткий обзор по статистическим тестам

Простой гид по A/B тестированию в Python

Никита Маршалкин: А/Б тесты сложнее, чем кажется | Интервью | karpov.courses

#дополнительно