Постмортем, только про дорогу
Залип на разборах ДТП у Стаса Асафьева и на третьем ролике понял, что смотрю постмортемы. Вместо дашбордов запись с регистратора, вместо инцидент-канала комментарии.
Одной причины не бывает. Чуть превысил, чуть сократил дистанцию, на секунду глянул в телефон. Каждый фактор по отдельности — «да нормально же». Вместе — авария. Швейцарский сыр, только дырки видно на записи.
Сигналы были заранее. Соседняя машина виляет, обзор закрыт фурой, зелёный уже мигает. Алерты сработали, обработать их было некому.
Дистанция — это headroom. Пока всё штатно, запас выглядит лишним, его первым и режут, когда экономят: на дороге — чтобы не влезли в окно, на проде — чтобы утилизация не выглядела бедно на графике. А когда начинается деградация, только он и даёт время среагировать.
Самое неприятное — «я был прав» не спасает. Приоритет по ПДД не гарантирует, что второй водитель его соблюдёт. SLA соседней команды не гарантирует, что их сервис не ляжет. Проектируй с расчётом, что зависимость отвалится.
Хороший разбор ищет не «кто дурак» (хотя альтернативно-недоразвитых в кадре хватает), а что позволило этому случиться. Blameless и на дороге работает.
А в твоём последнем постмортеме что нашли — причину или виноватого?
#SRE #DevOps #IncidentManagement #Postmortem #Reliability #OnCall
Мишка на сервере — про надёжность, инциденты и инженерную практику
В этом посте были ссылки, но мы их удалили по правилам Сетки
