Строили ли вы гипотезы самостоятельно? Проводили ли A/B-тесты и выбирали направление развития модели, параметры и метрики?

Отделите самостоятельную постановку гипотез от реализации чужого эксперимента. Расскажите, как выбирали направление, метрику, параметры и принимали решение по результатам.

Приведите реальную гипотезу, baseline, критерий успеха и ограничение. Если проводили A/B-тест, назовите единицу рандомизации и guardrails, не выдавая offline-сравнение за online-эксперимент. Неудачный результат тоже полезен, если он помог отказаться от неверного направления.