Коэффициент неопределенности
-
Определение коэффициента неопределенности
- Коэффициент неопределенности (U) измеряет номинальную связь между двумя дискретными случайными величинами.
- Основан на концепции информационной энтропии.
- Определяется как нормализованная взаимная информация между X и Y.
-
Формула и свойства
- U = I(X;Y) / H(X)
- U находится в диапазоне [0, 1] при I(X;Y) < H(X).
- Не зависит от основания логарифма.
- Полезен для измерения достоверности алгоритмов статистической классификации.
-
Применение и преимущества
- Не наказывает алгоритм за предсказание неправильных классов, если это делается последовательно.
- Полезен при оценке алгоритмов кластеризации.
-
Вариации и распространение
- U не симметричен относительно ролей X и Y.
- Симметричный показатель определяется как средневзвешенное значение между U и U.
- U можно распространить на непрерывные переменные с помощью оценки плотности.
-
Связанные понятия
- Взаимная информация
- Индекс ранда
- F-оценка
- Бинарная классификация