4 часа недоступности: постмортем падения Dodo IS

23 сентября у нас случился адский фейл: Dodo IS развалилась и мы 4 часа не могли принимать заказы Додо Пиццы.
Это было самое крупное падение с 2018 года, после инцидента мы на неделю остановили разработку фич, разбирались в причинах падения и чинили тонкие места.

Сегодня на Хабре Павел Притчин опубликовал подробную статью-постмортем этого инцидента. В ней он рассказывает о том, что именно происходило во время падения, как действовала команда, почему не удавалось быстро реанимировать систему и до какой самой глубокой причины удалось докопаться. О том, какую работу команда проделала для стабилизации системы, как улучшила работу с меню и какие долгосрочные решения были приняты.

Читайте, комментируйте, задавайте вопросы. А мы желаем всем, чтобы такие падения не происходили никогда.