Это была задача классификации или time series? Как учитывали время при обучении и проверке?

Классификация и временная зависимость не исключают друг друга: целевая переменная может быть классом, а наблюдения — зависеть от времени. Разбиение должно воспроизводить момент реального прогноза.

Сначала назовите объект, целевую переменную, горизонт и доступные на момент решения признаки. Для будущих событий используйте временной holdout или скользящую проверку, исключая признаки из будущего и пересечение окон меток. Временные агрегаты рассчитывайте только по прошлому. О собственном проекте рассказывайте по фактам: нельзя определить постановку только по названию используемой модели.