Домашняя страница Joindota

В финале Openai Five мы также поделились двумя сюрпризами:

. .

В финале Openai Five мы также поделились двумя сюрпризами:

. Легкость, с которой мы превратили конкурентный ИИ в кооперативный.
. Этот последний тест позволит нам ответить на важный вопрос исследования-в какой степени Openai Five подразумевается или в противном случае может быть надежно избит-и потенциально будет наибольшим в истории развертыванием высококомпетентного агента по обучению глубокому подкреплению, с которым люди могут сознательно взаимодействовать.

.5 месяцев в реальном времени по состоянию на международный), в среднем 250 лет моделируемого опыта в день. .9% WinRate против версии TI. [^Footenote-Winrate]

Передача обучения

Текущая версия Openai Five тренировалась непрерывно с июня 2018 года, несмотря на изменения в размере модели и правила игры (включая некоторые довольно большие обновления в игре и недавно реализованные функции). . Насколько нам известно, это первый раз, когда агент RL был обучен, используя такую долгоживущую обучение.

Чтобы сделать эту работу, мы продолжали выяснять нашу хирургическую инструмента, чтобы мы могли начать с обученных параметров даже в значительных изменениях архитектуры.

Мы видели очень мало замедления тренировок с 5 до 18 героев. .

. Хотя они все еще улучшались, они не учились достаточно быстро, чтобы достичь профессионального уровня до финала. У нас еще не было времени, чтобы выяснить, почему, но наши гипотезы варьируются от недостаточной модели до нуждаются. !

Мы считаем, что эти проблемы в корне решают, и решение их может быть интересно само по себе. Финальная версия играет с 17 героями – мы удалили лич, потому что его способности значительно изменились в Dota версии 7.20.

Это действительно было приятно; Моя гадюка дала свою жизнь за меня в какой -то момент. Он пытался помочь мне, думая: «Я уверен, что она знает, что делает», а потом, очевидно, я не. Но вы знаете, он верил в меня. . –

. Наши тестеры сообщили о чувствах поддержки со стороны их бота -товарищей по команде, что они узнали из игры вместе с этими продвинутыми системами, и что это, как правило, был забавный опыт в целом.