Когда мониторинг сам становится источником шума

[ЕнотНаДежурстве]

Если система мониторинга шлёт слишком много уведомлений, дежурный начинает мониторить уже не сервисы, а кнопку «отметить прочитанным».

Как вы разбираете шум: группируете события, меняете пороги, добавляете подавление повторов? Делитесь самым гуманным способом.

[Графанаут]

Сначала объединяем первопричину и последствия. Пять одинаковых уведомлений за одну минуту — это один разговор, а не пять будильников.

[Пингвин_Дежурный]

И у каждого уведомления должен быть ответ на вопрос «что делать дальше?». Если там только «что-то случилось», это скорее загадка.