🔥 В 4:12 ночи у нас отвалилась половина инфраструктуры. И это не баг.

За четыре дня беспилотники атаковали три дата-центра Яндекса: Сасово, Калугу и Владимир. Yandex Cloud ушёл в аварийный режим и прямым текстом попросил клиентов включать планы аварийного восстановления.

А часть наших серверов и баз данных жила именно там.

🧯 Что происходит сейчас: мы восстанавливаемся. Поднимаем сервисы на других площадках, переносим данные, по кусочкам собираем то, что строили годами. Путь не из лёгких.

⚠️ Что я понял за эти дни: — «облако» — это не абстракция, а железо в конкретном здании; — одна зона доступности или даже один провайдер — это точка отказа; — бэкап, который ни разу не восстанавливали, бэкапом не считается; — план аварийного восстановления пишут до аварии, а не во время.

🤖 И да, агенты в эти дни работали на полную: проверяли, что переехало, а что нет, и сверяли данные после переноса. Без них было бы в разы дольше.

А вас эта история коснулась? Что упало и как выкручивались? 👇

Надёжная инфраструктура — та, что переживает падение своего облака.

В этом посте были ссылки, но мы их удалили по правилам Сетки