Общая эксплуатационная характеристика

• Основы кривой оглавления (TOC)

  • TOC используется для оценки диагностической способности классификатора. 
  • Кривая TOC показывает соотношение между количеством правильных и неправильных прогнозов. 
  • Кривая TOC имеет две оси: количество правильных и неправильных прогнозов. 

• Кривые TOC и ROC

  • ROC-кривые являются расширением кривых TOC, добавляя информацию о ложных тревогах. 
  • Кривые ROC используются для оценки эффективности классификатора при различных пороговых значениях. 

• Интерпретация кривых TOC

  • Площадь под кривой (AUC) используется для обобщения диагностической способности. 
  • Кривые TOC могут иметь различную форму, что указывает на разные диагностические способности. 

• Критика AUC

  • AUC критикуется за игнорирование пороговых значений и пространственного распределения ошибок. 
  • AUC не предоставляет информацию о пространственном распределении ошибок модели. 

• Альтернативные показатели

  • Информированность, достоверность и коэффициент Джини являются альтернативными показателями, которые лучше отражают производительность классификатора. 

• Частичная AUC и логарифмическая шкала

  • Частичная AUC используется для анализа областей с низкой частотой ложных срабатываний. 
  • Логарифмическая шкала часто применяется для оси x в задачах классификации с P ∈ N.