Когда наблюдаемость может сыграть злую шутку: с сервисом всё хорошо, но мониторинг показывает проблему?

Ложный сигнал возникает из-за неверного порога, сломанного сбора метрик, задержки данных или неправильной агрегации. Проверять нужно и сервис, и сам мониторинг.

Например, отсутствие scrape может выглядеть как исчезновение трафика, а среднее значение скрывает разницу между инстансами. Сопоставьте алерт с пользовательскими ошибками, логами и независимой проверкой. Уточните временное окно, единицы измерения, reset счётчиков и знаменатель доли ошибок. Отдельно контролируйте доступность сборщика: отсутствие данных не равно нормальному состоянию.