Научная основа
Проверка качества поиска и RAG
Оценивает качество поиска и RAG на версии корпуса и понятных тестах.
Сценарий работы
- Назначение
- Оценивает качество поиска и RAG на версии корпуса и понятных тестах.
- Вход
- Версия корпуса, набор вопросов, ожидаемые ответы и граница оценки.
- Результат
- Отчёт о точности, пробелах и воспроизводимых проверках.
- Граница
- Не меняет корпус или поведение системы без отдельного решения.
Исходный технический контракт пакета
Далее приведён исходный язык и формулировка пакета.
Идентификатор пакета: janus-rag-quality
Оригинальное имя в реестре: Проверка качества поиска и RAG
Рабочий контракт
- Направления
- rag-quality
- Типы задач
- RAG evaluation, grounded AI quality
- Уровень риска
- controlled
- Граница исполнения
- task-authorized
- Статус проверки
- validated
Когда использовать
- RAG regression corpus promotion или model change
- нужно проверить groundedness citations и no-answer
- нужна conversational AI release acceptance
Что получите
Отчёт о точности, пробелах и воспроизводимых проверках.
Что нужно передать
- Версия корпуса, набор вопросов, ожидаемые ответы и граница оценки.
Когда не применять
- feedback aggregation
- model training
- ordinary UI copy
Связанные навыки
Проверяемый архив
Сверьте SHA-256 загруженного файла с контрольной суммой ниже перед установкой.
Скачать и проверитьSHA-256 архива: d94b3da6a3e36c764ad213dcec317eb37945ec1bb17b86674a35ae042a3a046f