История о том как мы пытались выжить или "что было со стражником?"
Ну... Нас подставил один из поставщиков услуг, датацентр в котором работает стражник. Примерно в полночь неожиданно для нас резко выросла утилизация процессора на наших виртуалках и Load Average улетел в 50+. Мы сразу связались с саппортом и вставили пару отрезвляющих слов, работа восстановилась и я радостный не спавший 2 предыдущие ночи умер на 12 часов.
И именно во время этих 12 часов утилизация процессора снова взлетела и угробила VPS-ки. Как мы предполагаем, это был или DDOS на инфру датацентра или сбой на дисках которых были наши данные, что вызвало рост iowait. Официальной позиции со стороны ДЦ мы ещё не получили, но ребята стали работать с нами и последние несколько часов приоритетно следят за работой нашего оборудования предотвращая сбои (после запроса рефанда и десятка описательных прилагательных приправленных частицами).
Вот так, обычный день когда я планировал на свежую голову спокойно поработать, превратился в неостановочный многочасовой кранч.
(Саппорт ДЦ настолько наслушался меня что аж заговорил на русском)
#downTime
Post #418
3.54K
- ⚡ 64
- 🔥 16
- ❤🔥 8
- ❤ 7
- 👍 5
- 😁 5
- 😢 2
- 😍 1
- 💔 1
- 😨 1
- 💊 1