Хто моніторить монітор?

Вчора вечором мені в Telegram поприлітало кілька червоних алертів: хост, на якому крутиться Uptime Kuma, не відповідає. Я писав раніше, шо поставив її для моніторингу своїх ресурсів, а потім додав ще моніторинг самої Kuma, на випадок, якщо впаде вона. І цей час настав 🙂

Спробував зайти на неї — не відповідає. Схоже, що віртуалка лежить. Дивлюсь в імейли, які я пропустив, а там urgent alert, що мій акаунт видалився:

> Your billing account has been terminated for failure to provide a valid payment instrument or for not making all overdue payments. In addition the related Project(s) and/or Service(s) have been terminated.

Так би я, мабуть, забив на це до ранку, чи навіть понеділка, але фраза "account terminated" мене (неприємно) тригернула, і я поліз дивитись, шо там відбувається.

Виявилось, шо картка була прострочена, гугл не зміг списати гроші, обурився і вирішив не працювати. І видалили не сам акаунт, а біллінг-акаунт (так, в листі це і написано, але після слова terminated далі якось не читається). Його можна було відновити, якщо оновити картку, і потім просто пододавати до нього мої проєкти. Тобто все було набагато прозаїчніше: оновив payment method, понажимав кілька кнопочок, і все повернулось назад. В інших клаудах це все обходиться без драми, чи може я давно не попадав в таку ситуацію.

Висновки, якими хочу поділитись.

По-перше, сам моніторинг треба моніторити. Дуже добре, шо я додав зустрічний моніторинг хоста, який моніторить все інше.

По-друге, комунікація від Google. Не знаю, чи вони це спеціально придумали, чи так випадково получилось, але слова "account terminated" додають +67 до мотивації негайно розбиратись. Якщо це by intention, то моя повага.

Ну і третє: сума, через яку весь цей двіж виник, — 62 центи. Можливо, навіть не на тому проєкті, бо там ще є якісь тестові, які я колись створював, десь якісь ресурси висять і їдять копійки, і може воно це все і тригернуло.

Знаю, шо зараз хтось напише про запасну картку в біллінгу і нагадувалку в календар за місяць до кінця картки. Пишіть, це дійсно корисна порада.

Кидайте в коменти найменшу суму, через яку у вас падав прод. Мої 62 центи, мабуть, не рекорд.