BLEU для ответов RAG: ограничение метрики

Ассистент может передать верный смысл другими словами, а может повторить слова источника с ошибочным выводом. Вопрос проверяет, на чём основана BLEU и почему одной этой метрики недостаточно для оценки таких ответов.

Ответьте на вопрос и проверьте свой выбор на странице.

Продолжить практику: программа курса «Vector DB & RAG Developer».

Почему метрика BLEU плохо подходит для оценки ответов RAG-системы?

Выберите один вариант
Без регистрации · результат не сохраняется

Связанные задачи