АЙКСИ
-
Определение AIXI
- AIXI — это агент, который максимизирует ожидаемое количество вознаграждений, основываясь на восприятии окружающей среды.
- AIXI использует универсальную машину Тьюринга для моделирования реакций окружающей среды и выбирает действия на основе этого моделирования.
-
Выбор действий
- AIXI выбирает действие, которое максимизирует сумму вознаграждений, взвешенных по сложности моделируемой среды.
- Сложность моделируемой среды определяется длиной программы, которая ее описывает.
-
Параметры AIXI
- Универсальную машину Тьюринга и время жизни агента необходимо выбрать для AIXI.
- Время жизни агента может быть удалено с помощью дисконтирования.
-
Интерпретация слова AIXI
- Слово «АЙСИ» имеет несколько толкований, включая «искусственный интеллект, основанный на распределении Соломонова» или «скрещенный с индукцией».
-
Оптимальность AIXI
- AIXI является оптимальным по Парето и сбалансированным оптимальным по Парето в определенных условиях.
- AIXI также является самооптимизирующимся в определенных классах сред.
-
Ограничения AIXI
- AIXI ограничен в максимизации вознаграждений, основанных на восприятии, и взаимодействует с окружающей средой только через каналы действия и восприятия.
- Окружающая среда должна быть вычислимой для работы AIXI.
-
Вычислительные приближения
- Существуют вычислимые приближения к AIXI, такие как AIXItl и MC-AIXI, которые работают в ограниченных условиях.