Тихий on-call начинается до сетевой правки

Мониторинг показывает «узел недоступен». Причина — ты заменил маршрут, потерял SSH и теперь не можешь вернуть прежнюю конфигурацию. Рассчитывать на ручной откат через ту же сеть — это не план, а ставка на удачу.

Перед изменением поставь локальный rollback-таймер: systemd-run --unit=net-rollback --on-active=5m /usr/local/sbin/restore-network. Скрипт восстановления проверь заранее. После правки проверь управление из отдельной сессии и только затем отмени таймер. Если связь пропала, systemd выполнит возврат без твоего участия.

Watchdog помогает перезапустить зависший процесс, но не спасает от неверного маршрута и не заменяет проверку. Спокойное дежурство строится на безопасном откате, независимом канале доступа и критериях, при которых изменение считается успешным.

#ftops #devops #linux #freebsd #sre #инфраструктура

Тихий on-call начинается до сетевой правки
Мониторинг показывает «узел недоступен». Причина — ты заменил маршрут, потерял SSH и теперь не можешь вернуть прежнюю конфигурацию | Сетка — социальная сеть от hh.ru