Начальник отдела сопровождения и развития внутренних сервисов в КРДВ Корпорация Развития Дальнего Востока
· 19.09🔥 Пятничное: Алерт-зомби и эпидемия шума Видно все - решается ничего. Алертов сыпется столько, что внимание стало дефицитом: смотреть некогда, разбирать некому, ответственности нет. Чаты горят, графики красные и полное спокойствие. Когда все важно - не важно ничего. За ночь прилетает сотня срабатываний. Информационные сигналы топят боевые - тот самый on-call, ради которого вообще существует алертинг.
📉 Эволюция мониторинга Первый месяц: бежим разбираться с каждым уведомлением. Третий месяц: смотрим только на «критичные». Полгода: реагируем, когда звонят пользователи. Год: звук уведомлений «временно» выключен. Полтора года: главный мониторинг - телефон службы поддержки. Самая надежная метрика - не SLI, а "звонит помощник директора". Секретарь стал SRE и системой раннего оповещения для репутационных рисков.
🧊 Театр наблюдаемости • Сотни "бздынь" без реакций - игнор по умолчанию, а не баг. • Чем громче мониторинг, тем тише команда: любое ЧП пролистывается как рутина. • Алерты по "железу" без связи с SLO и симптомами игнорируется первым - красиво мигает, пользы ноль. • Сигнал без владельца - это ничья ответственность и ничье действие. • Стратегия "давайте пока оставим" создаем музей шума. Папка "не критично" - кладбище ответственности.
🤔 Пятничные вопросы • Сколько систем шлют одно и то же разными словами? • Вы узнаете о проблемах из helpdesk раньше, чем от мониторинга? • Есть алерты, которые срабатывают ежедневно полгода? • Кто ваш самый надежный источник - Zabbix или секретарь?
🧨 Финал Если алерт не ведет к действию, он не существует. Это художественная литература в формате push.
#Пятничное #холивар #CIO #CTO #monitoring #sre #observability
· 19.09
Я просто оставлю комментарий что бы быть заметнее но в последующем изучу ваш материал
ответить
еще контент автора
еще контент автора
Начальник отдела сопровождения и развития внутренних сервисов в КРДВ Корпорация Развития Дальнего Востока
· 19.09войдите, чтобы увидеть
и подписаться на интересных профи