8 марта 2023 года мы зафиксировали новый рекорд заказов в минуту. Пожалуй, это самое волнительное для нас событие прошедшего квартала!

В праздничные дни нагрузка на Dodo IS всегда намного выше, чем даже в обычные выходные, поэтому готовиться к ней мы начинаем примерно за месяц. За подготовку отвечает команда SRE, а проходит она по такому флоу:

- запускаем нагрузочное тестирование (х3), выявляем слабые места, чиним;
- опрашиваем владельцев сервисов критического пути о текущем состоянии сервисов и выясняем, что нужно успеть сделать, чтобы без боли пережить нагрузку в праздники;
- выясняем, какие новые критичные изменения могут выйти перед пиками продаж и думаем, как перестраховаться;
- если не успеваем починить проблемы, то обновляем ранбуки на случай, если стрельнёт на проде;
- при необходимости устраиваем релиз- и код-фризы;
- настраиваем праздничные дежурства в пейджере.

Эти действия помогают оценить готовность Dodo IS к пиковым нагрузкам, а команды фокусируются на тех задачах, которые обязательно нужно завершить к праздникам.

В этот раз поработали над тем, чтобы сделать онлайн-оплату ещё стабильней, улучшили перформанс у сервиса «Касса доставки», сделали рейт-лимитер запросов к гео-сервису, разделили пулл коннектов к базе монолита в легаси-фасаде и оптимизировали походы в базу для построения контекста расчёта, зарелизили кеширование самых используемых меню в mapi для корзины.

А ещё обнаружили, что у нас проблема с нагрузочным тестированием — скоро расскажем, в чём она заключалась и как её решили.