⚒️ РАССКАЗЫВАЕМ О ПРИЧИНЕ ПАДЕНИЯ СОФТА

В минувшую среду у клубов по всей России на час с небольшим упал наш софт. Мы обещали объяснить, что произошло, и теперь рассказываем.

В тот день планировалось обновление, которое должно было минимизировать последствия работы ТСПУ для связи клубов с серверами. У тестовых клубов проблем с обновлением в течение нескольких дней не возникло, поэтому его решили «разливать» на всех. Это должна была быть абсолютно штатная процедура.

Увы, в процессе мы не указали один небольшой параметр, из-за чего операционная система сервера начала плодить бесконечное количество логов, которые «вешали» серверы и парализовывали работу клуба. А произошедший в то же время системный бой отправил это обновление сразу на все серверы.

Вот так несколько случайно сошедшихся в одно время факторов привели к локальному коллапсу. Но мы оперативно все пофиксили, вернули клубы в строй и корректно обновили всю систему.

Теперь связь с серверами станет стабильнее, а количество разрывов заметно снизится. Кроме того, клубам с большим количеством ПК на домене понадобится меньше ресурсов сервера.

Чтобы не допустить повторения случившегося, мы скорректировали внутренние регламенты: для запуска массового обновления теперь потребуется согласование нескольких независимых руководителей.

Благодарим всех вас за то, что проявили понимание и поддержали нас в этой сложной ситуации 🫶