RU

Почему дежурные не эскалируют

Дежурные оттягивали звонок как можно дольше. Сервис частично не работает, дежурный это видит, понимает, что сам может не справиться, и всё равно не…

инцидент-менеджментдежурстваэскалацияon-callSREклассификация инцидентовуровни критичностирегламентMTTRуправление командой
Хабр — Управление
RU

От бизнес-метрики до дежурного: как построить алертинг, от которого не страдают

Эта статья - о шаге, который предшествует настройке маршрутов: как выбрать сигнал, связать его с влиянием на бизнес, определить срочность и проверит…

alertingmonitoringobservabilitysresloprometheusalertmanageron-callбизнес-метрикиnxs-anomaly
Habr
RU

От метрики до дежурного: путь алерта через Prometheus, Alertmanager и nxs-anomaly

Критичный сервис лег, Prometheus показывает firing , в общем чате уже бухтят менеджеры, но к исправлению проблемы никто не приступил: один инженер р…

alertingon-callprometheusalertmanagermonitoringopensourseobservabilitymetricsinfrastructuresla
Habr
RU

Как мы добавили Global Orchestration в IncidentRelay: маршрутизация алертов до создания инцидента

Когда система мониторинга отправляет алерт, он редко выглядит так, как хотелось бы дежурному инженеру. Один источник пишет critical , другой — disas…

incident managementalert routingon-callSREDevOpsopen sourceself-hostedIncidentRelay
Habr
RU

Культура инцидентов. Почему поиск виновных на постмортемах убивает надёжность системы

Когда прод падает, первый управленческий рефлекс — найти человека, после которого всё сломалось. Проблема в том, что такой разбор поч…

postmortemblameless cultureинцидент-менеджментSREerror budgeton-callнадёжность системинженерная культуратехнический менеджментразбор инцидентов