После «таких инцидентов» обычно вспоминают про бэкапы и начинают разработку сложных систем по настройке и сбору резервных копий данных БД.

Как раз недавно в команде закончили проект, посвященный бэкапам.