Однажды, в тёмную-тёмную ночь во время попытки выкатить срочный hotfix на прод, CI/CD-процессы начали отваливаться, а воркеры и вовсе — пропадать. Сначала один, потом ещё — и тишина.
И вроде на помощь были призваны чудеса CI: настроены лимиты, алерты и даже OOM-киллеры, чтобы отстреливать слишком прожорливые процессы. А воркеры всё равно исчезали.
И вот на пятом часу ночного инцидент-звонка один DevOps решился копнуть глубже. Он спустился в самые тёмные каталоги с логами… И там, в глубине листинга, нашёл его — тест с zip-бомбой, который за секунду раздувал десятки гигабайт на диске.
С рассветом никаких следов от него не осталось, и только #пятничный_деплой хранит эту правдивую историю.
Post #125
1.99K

- 😁 30
- 🔥 17
- 🎃 10
- ❤ 3