Как технически реализовать систему хранения данных и алертов для мониторинга модели?

Разделите технические метрики, события предсказаний и отложенные метки. Их собирают через наблюдаемые pipeline, а алерты строят по SLO, качеству данных и подтверждённым отклонениям.

Числовые временные ряды отправляйте в мониторинг, обезличенные события — в аналитическое хранилище с retention и версией модели. Связывайте прогнозы с метками безопасным ID. Для каждого алерта нужны порог, окно, минимальный объём, ответственный и инструкция; избегайте высококардинальных меток с пользователями и текстами запросов.