Еще недавно мы мрачно шутили, что у Яндекса остался последний серьезный нетронутый оплот во Владимире и если прилетит туда - наступит цифровой каменный век? Шутка прожила ровно 48 часов. В воскресенье утром появляется алёрт:
...дата-центр Яндекса во Владимире поврежден атакой БПЛА, его работа ПОЛНОСТЬЮ остановлена.
Сасово (
ru-central1-b) сгорело в четверг, Калугу (ru-central1-d) ополовинило в пятницу, Владимир (ru-central1-a) заглушен в воскресенье. Три опорных дата-центра национального бигтеха за четверо суток ⚰️А вместе с владимирской площадкой окончательно погас Галушкин - последний из тройки легендарных суперкомпьютеров Яндекса (Червоненкис и Ляпунов пострадали еще в Сасово). Весь топовый суперПКшный флот страны, годами штурмовавший мировой рейтинг TOP500 буквально за выходные выпал.
😱 А самая жопа вот в чем... Яндек пишет:
Оставшуюся конфигурацию ресурсов считаем неустойчивой. Режим работы платформы является аварийным — рекомендуем задействовать любые другие альтернативные планы по аварийному восстановлению
Облако мертво, кворума нет, спасайтесь кто может.
Что сейчас еще трепыхается на остатках мощностей в раненой Калуге и Мытищах... выглядит это как сводка из реанимации:
🟢Базы данных в коме... из-за физической потери двух зон из трех большинство HA-кластеров словили split-brain. Те базы, что чудом не развалились, намертво заблокированы контрол-плейном в режиме ридонли.
🟢S3 Object Storage при смерти... запись новых объектов встала колом, кластер с трудом отдает только старые блобы на чтение.
🟢Кубер... региональные кластеры, чьи мастера etcd хотя бы одной ногой стояли во Владимире или Сасово, превратились в пустоту без возможности восстановления конфигурации.
🟢Каналы поддержки Яндекса… упали сами. Статус-борд обновляется с задержками, тикетница задохнулась, достучаться до инженеров невозможно.
Жопа лютая. Яндекс за 4 дня сложился... 🤙
А сейчас вообще больно... патформа лишилась флагманской AliceAI Pro, распознавания документов OCR, аналитики SpeechSense и векторного Retrieval API - из генеративки на искусственном дыхании остались лишь урезанные легковесные флеш-модели. Стек ИБ выкошен под корень... собственный SIEM, аудит-логи и мониторинг угроз YCDR светятся мертвым красным кружком. Систему больше некому и не на чем даже защищать.
Это тектонический финал целой эпохи. За 96 часов на наших глазах в пыль рассыпался красивый миф о том, что модные микросервисы, георезерв и программные абстракции способны пережить физическое уничтожение наземных ангаров.
З.Ы. В четверг Яндекс учил нас переносить нагрузку в соседние зоны. В пятницу - советовал брать дедики Bare Metal и бежать по промокоду к конкурентам. В воскресенье - признал, что платформа неустойчива и спасения нет.
Кажется, скоро наступит то самое время, о котором я шутил в бугурт-тредах... выдергиваем патчкорды, достаем дискеты и учимся выживать в лесу.
Помянем усопшие кластеры не чокаясь 🍺
Типичный 🥸 Сисадмин