100. «С Новым годом!» – сказал сервер и упал

Несколько лет назад вся компания, в которой я тогда работал, поехала за город отмечать Новый год. Два дня тусили на тур. базе: ели, пили, веселились. Когда корпоратив стал терять последних трезвых бойцов, продакшн сервер упал.

Иностранные клиенты были не в курсе, что зимой надо две недели отдыхать и требовали восстановить работоспособность продукта. К счастью, удалось найти трезвого разработчика, у которого были необходимые доступы. Правда у него не было ноутбука.

В итоге починили быстро. Но с тех пор я следую новогодним правилам:

1. Работоспособность продукта автоматически мониторится. В случае проблемы всей команде приходит сообщение в чат. А потом звонок на телефон.

2. Каждый день должен быть как минимум один человек, способный решить проблему. У него должен быть интернет и компьютер с нужными доступами.

3. Если половина команды на новогодних праздниках собирается покорять Эверест, а вторая половина нырнула в Марианскую впадину – убедитесь, что сделают они это не одновременно. Составьте расписание дежурства на каникулах.

С Новым 2021 годом!