RAG с цитатами: что проверять автоматическим тестом

Проверка цитат начинается с формальных свойств: ссылка должна указывать на известный источник, а идентификатор — существовать в доступном контексте. Такие требования легче автоматизировать, чем общую оценку «ответ хороший».

Формальная корректность ссылки не доказывает, что источник подтверждает утверждение. Для этого нужна отдельная оценка содержания. В упражнении отделите простой тестируемый инвариант от более сложной проверки качества.

Это бесплатное упражнение из платного курса. Проверьте решение без регистрации. Объяснения и последовательная практика — в курсе «LLMOps & Evaluation: из песочницы в продакшн».