TGViewer
A/B-тестирование в мобильных играх A/B-тестирование в мобильных играх @abtestingmobilegames · 430 subscribers
Post #29 802
​​У нас небольшая годовщина. Прошел год с момента как мы полностью перешли на нашу платформу для АБ-тестирования. Поначалу было очень волнительно смотреть только на результаты экспериментов и совсем не обращать внимание на метрики типа длины сессии и ретеншена.

Мы совершенно не были уверены что продержимся долго. Казалось, что обязательно произойдет что-то и мы вернемся в Амплитуду или Firebase, чтобы разобраться “по-нормальному”. Но оказалось все совсем не так срашно.

Вот результаты по top-3 странам. LTV/User
1. US: $0.74 (+32.14%)
2. UK: $0.53 (+39.47%)
3. DE: $0.27 (-38.64%)

1. За год мы подняли в Штатах LTV на игрока на 32%. Т. к. большая часть трафика у нас из Штатов, +32% - это основной результат.
2. Я сознательно включил в отчет Германию, чтобы показать, что мы не улучшаем игру для всех стран. Где-то LTV проседает, но мы с этим ничего не делаем так как нацеливаемся на 1st tier в целом.

Мысль вслух. Было бы круто, конечно, тюнить для каждой страны в отдельности. Технически понятно как это можно сделать. Непонятно что делать с объемом трафика. Нам не хватит объемов, чтобы сделать статистические выводы по отдельным странам.
3. В среднем в месяц получается 2.5%. Учитывая что мы запускаем новый эксперимент примерно раз в неделю, выходит примерно полпроцента на каждый эксперимент.

Радует что на анализ данных мы не потратили ни одной минуты. Мы просто выкатывали все что нам говорила платформа.

Похоже что до LTV $1 за игрока нам еще примерно 2 года.

Цель ясна. Работаем дальше!
More from @abtestingmobilegames
  1. Aug 28, 2024От нас долго не было ничего слышно, но мы каждую неделю продолжаем запускать AB-тесты 🙂 С…
  2. Jun 29, 2021Как же мы устали от тестовых платежей. Многие наши эксперименты не красились из-за тестовы…
  3. Jun 3, 2021DevGamm опубликовал нашу лекцию "Как проводить эксперименты в мобильных играх". 1. Техниче…
  4. Jun 1, 2021Ron Kohavi в книге Trustworthy Online Controlled Experiments перечисляет типы архитектуры…
  5. May 25, 2021CUPED - это технология, которая увеличивает чувствительность А/Б экспериментов. Booking и…
  6. May 18, 2021​​Ron Kohavi в книге Trustworthy Online Controlled Experiments приводит приблизительную фо…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →