Общая эксплуатационная характеристика
-
Основы кривой оглавления (TOC)
- TOC используется для оценки диагностической способности классификатора.
- Кривая TOC показывает соотношение между количеством правильных и неправильных прогнозов.
- Кривая TOC имеет две оси: количество правильных и неправильных прогнозов.
-
Кривые TOC и ROC
- ROC-кривые являются расширением кривых TOC, добавляя информацию о ложных тревогах.
- Кривые ROC используются для оценки эффективности классификатора при различных пороговых значениях.
-
Интерпретация кривых TOC
- Площадь под кривой (AUC) используется для обобщения диагностической способности.
- Кривые TOC могут иметь различную форму, что указывает на разные диагностические способности.
-
Критика AUC
- AUC критикуется за игнорирование пороговых значений и пространственного распределения ошибок.
- AUC не предоставляет информацию о пространственном распределении ошибок модели.
-
Альтернативные показатели
- Информированность, достоверность и коэффициент Джини являются альтернативными показателями, которые лучше отражают производительность классификатора.
-
Частичная AUC и логарифмическая шкала
- Частичная AUC используется для анализа областей с низкой частотой ложных срабатываний.
- Логарифмическая шкала часто применяется для оси x в задачах классификации с P ∈ N.