Accuracy — это простая метрика, показывающая долю правильных предсказаний модели из всех предсказаний. Она подходит для задач классификации, где важна общая точность.
В чём разница между метриками NDCG и Accuracy? Какая важнее для ленты новостей?
Accuracy — это простая метрика, показывающая долю правильных предсказаний модели из всех предсказаний. Она подходит для задач классификации, где важна общая точность.
Короткий ответ
Что ответить на собеседовании
Подробный разбор
Ответ с пояснениями
Accuracy — это простая метрика, показывающая долю правильных предсказаний модели из всех предсказаний. Она подходит для задач классификации, где важна общая точность.
NDCG (Normalized Discounted Cumulative Gain) — метрика, используемая для оценки качества ранжирования. Она учитывает не только правильность, но и порядок элементов в выдаче, при этом более высокие позиции имеют больший вес.
Для ленты новостей важнее NDCG, потому что:
- В ленте важен не просто набор релевантных новостей, а их порядок — пользователи чаще смотрят верхние позиции.
- NDCG учитывает релевантность и позицию, что лучше отражает пользовательский опыт.
Accuracy в данном контексте малоинформативна, так как не учитывает порядок и степень релевантности новостей.