Дисперсия чего именно возникает в IPS-оценке?

В IPS речь о дисперсии оценки ожидаемой награды целевой политики на случайных логах. Её увеличивают большие веса, возникающие при малой вероятности наблюдённого действия у logging policy.

Короткий ответ

Что ответить на собеседовании

В IPS речь о дисперсии оценки ожидаемой награды целевой политики на случайных логах. Её увеличивают большие веса, возникающие при малой вероятности наблюдённого действия у logging policy.

Подробный разбор

Ответ с пояснениями

В IPS речь о дисперсии оценки ожидаемой награды целевой политики на случайных логах. Её увеличивают большие веса, возникающие при малой вероятности наблюдённого действия у logging policy.

Оценка имеет вид среднего wᵢrᵢ, где wᵢ = π(aᵢ|xᵢ)/μ(aᵢ|xᵢ). При независимых наблюдениях дисперсия среднего равна Var(wr)/n, если она конечна. Для действий целевой политики необходимо покрытие μ > 0. Clipping снижает разброс ценой смещения; это не дисперсия самих embeddings или предсказаний модели.

ИИ-помощник для собеседований

Хочешь уверенно проходить собеседования?

Попробуй ИИ-помощник для собеседований: слышит вас и собеседника, анализирует экран, подсказывает ответы в реальном времени, работает без VPN и не попадает в захват экрана.

Подробнее