Метрики Computer Vision: precision, recall, F1 и IoU — задачи
Детектор редко ошибается в найденных объектах, но пропускает большинство нужных. Можно ли назвать его хорошим? В этих заданиях нужно связать метрики с тем, что реально делает модель: кого она находит, кого пропускает и какие классы путает.
Начать практику: Precision и recall в ранжированном списке детектора.
Вопросы с выбором ответа. Проверка доступна без регистрации.
Как проходить
Начните с precision и recall в списке предсказаний, затем переходите к матрице ошибок и усреднению F1. В последнем вопросе высокая точность рамок соседствует с неверным подсчётом объектов: это уже проблема смысла разметки. Для ответа не нужно скачивать датасет или запускать обучение.
На что обратить внимание
Перед выбором ответа назовите знаменатель метрики. Precision относится к найденным объектам, recall — ко всем нужным объектам. При усреднении по классам отдельно проверьте, одинаковый ли вес получают редкий и частый классы.
Задания
- Precision и recall в ранжированном списке детектора — вопрос.
- Матрица ошибок: какие классы путает модель CV — вопрос.
- F1 при высокой precision и низкой recall — вопрос.
- Micro, macro и weighted F1: усреднение по классам — вопрос.
- Высокий IoU, неверный подсчёт объектов: задача по CV — вопрос.
Продолжить обучение
Разберите тему по порядку в курсе Computer Vision Engineer: от детекции и Doc-AI до продакшна.
Связанная практика: Computer Vision на Python: рамки, маски и проверка инференса.
- Precision и recall в ранжированном списке детектора
Precision и recall в ранжированном списке детектора. Вопрос с проверкой ответа и переходом к практике курса.
Computer Vision Engineer: от детекции и Doc-AI до продакшна - Матрица ошибок: какие классы путает модель CV
Матрица ошибок: какие классы путает модель CV. Выберите ответ и проверьте себя.
Computer Vision Engineer: от детекции и Doc-AI до продакшна - F1 при высокой precision и низкой recall
F1 при высокой precision и низкой recall. Вопрос с проверкой ответа и переходом к практике курса.
Computer Vision Engineer: от детекции и Doc-AI до продакшна - Micro, macro и weighted F1: усреднение по классам
Micro, macro и weighted F1: усреднение по классам. Вопрос с проверкой ответа и переходом к практике курса.
Computer Vision Engineer: от детекции и Doc-AI до продакшна - Высокий IoU, неверный подсчёт объектов: задача по CV
Высокий IoU, неверный подсчёт объектов: задача по CV. Выберите ответ и проверьте себя.
Computer Vision Engineer: от детекции и Doc-AI до продакшна
