Функция Softmax

От / / Оставьте комментарий

Функция Softmax Функция softmax используется в задачах классификации для преобразования векторов в вероятности классов.  Функция softmax является нелинейным вариантом мультиномиальной […]

Artificial neural networks, Computational neuroscience, Exponentials, Functions and mappings, Logistic regression, Вычислительная нейронаука, Искусственные нейронные сети, Логистическая регрессия, Функции и отображения, Экспоненты

Функция Softmax

  • Функция softmax используется в задачах классификации для преобразования векторов в вероятности классов. 
  • Функция softmax является нелинейным вариантом мультиномиальной логистической регрессии. 
  • В области обучения с подкреплением функция softmax используется для преобразования значений в вероятности действий. 
  • Вычислительная сложность softmax становится ограничивающим фактором в разработке крупных моделей нейронного языка. 
  • Существуют подходы для сокращения времени обучения, включая иерархический softmax и дифференцированный softmax. 
  • Математические свойства функции softmax включают отображение векторного пространства до границы стандартного (K-1)-мерного симплекса. 
  • Пересказана только часть статьи. Для продолжения перейдите к чтению оригинала. 

Полный текст статьи:

Функция Softmax — Википедия

Похожие статьи:

  1. Скорость обучения Скорость обучения Основные понятия машинного обучения Контролируемое обучение: обучение с заранее определенными целями и критериями оценки. ...
  2. Метод обучения Метод обучения Обзор методов обучения Методы обучения включают в себя различные подходы к преподаванию и обучению. ...
  3. Теория обучения Теория обучения Определение теории обучения Теория обучения предлагает рекомендации по улучшению обучения и развития.  Она описывает,...
  4. Функция плотности вероятности Функция плотности вероятности Функция плотности вероятности описывает вероятность нахождения случайной величины в определенном интервале.  Функция плотности...
  5. Симплекс Симплекс Симплекс — это многогранник с n вершинами, каждая из которых имеет n-1 ребер.  В евклидовом...
  6. Функция массы вероятности Функция массы вероятности Массовая функция вероятности описывает вероятность каждого возможного исхода дискретной случайной величины.  Распределения дискретных...
  7. 6-симплекс 6-симплексный 6-симплекс является самодвойственным правильным 6-многогранником с 7 вершинами, 21 ребрами и другими характеристиками.  Он имеет...
  8. 7-симплекс 7-симплексный 7-симплекс является самодвойственным правильным 7-многогранником с 8 вершинами, 28 ребрами и другими характеристиками.  Он имеет...
  9. Функция, генерирующая вероятность Функция, генерирующая вероятность Функция генерации вероятности описывает вероятность случайной величины.  Она связана с производящей функцией вероятности...
  10. Закон полной вероятности Закон полной вероятности Определение и применение закона полной вероятности Закон полной вероятности описывает вероятность события, которое...
  11. Теория обучения (образование) Теория обучения (education) Обзор теорий обучения Теории обучения охватывают широкий спектр подходов к обучению, включая конструктивизм,...
  12. Амплитуда вероятности Амплитуда вероятности Основы квантовой механики Квантовая механика описывает поведение частиц на микроскопическом уровне.  Волновая функция описывает...
  13. Свойство с наименьшей верхней границей Свойство наименьшей верхней границы В математике свойство наименьшей верхней границы (l.u.b. свойство) является фундаментальным свойством действительных...
  14. Сублинейная функция Сублинейная функция Определение и свойства сублинейных функций Сублинейная функция — это функция, которая удовлетворяет неравенству треугольника. ...
  15. Векторное управление (двигатель) Векторное управление (двигатель) Основы векторного управления асинхронными двигателями Векторное управление асинхронными двигателями использует пространственно-векторные модели для...

Оставьте комментарий

Прокрутить вверх