В RAG документы — это доступные системе источники знаний: статьи, инструкции, страницы, записи или файлы. Их извлекают, очищают, разбивают на фрагменты и индексируют вместе с метаданными и правами доступа.
Что такое RAG с точки зрения документов — что это за документы и как они подготавливаются?
В RAG документы — это доступные системе источники знаний: статьи, инструкции, страницы, записи или файлы. Их извлекают, очищают, разбивают на фрагменты и индексируют вместе с метаданными и правами доступа.
Короткий ответ
Что ответить на собеседовании
Подробный разбор
Ответ с пояснениями
В RAG документы — это доступные системе источники знаний: статьи, инструкции, страницы, записи или файлы. Их извлекают, очищают, разбивают на фрагменты и индексируют вместе с метаданными и правами доступа.
При запросе находят релевантные фрагменты и добавляют их в контекст модели. Важно сохранять заголовки, связи, источник, версию и границы смысла; слишком мелкие chunks теряют контекст, слишком большие расходуют окно. Нужны обновление и удаление индекса, фильтрация по доступу и проверка качества retrieval. Документ остаётся недоверенным содержимым, а не инструкцией менять правила работы агента.