Чем заняться на выходных?
Участники рассказывают о сложных багах или инфраструктурных кошмарах, которые приходилось фиксить. Подслушали, что там происходит:
⚪️ Удалил прод Kubernetes кластер. ПМ профукал письмо о принудительном апдейте версии куба. А терраформ соответственно его задестроил
⚪️ Инфраструктура рухнула из-за того, что бэкап на тот же диск писали — тупо переполнили всё
⚪️ После обновления конфигов в продакшене пропала половина сервисов. Оказалось, что новый YAML-файл содержал неправильный индент, из-за чего Kubernetes просто игнорировал часть настроек. 5 часов паники, пока не нашли проблему
⚪️ Однажды в CI/CD билды начали падать случайным образом, а артефакты не загружались. Оказалось, проблема в самоподписанных сертификатах между GitLab Runner и Nexus
Рассказывайте, как вы заливали тестовые версии в продакшен, ну или чего еще вы там делали — и участвуйте в розыгрыше.
#спецпроект
@DevOpsKaz 😛