The International 2018: Результаты

OpenAI Five проиграла две игры против сильнейших игроков в Dota 2 на турнире The International в Ванкувере на этой неделе, удерживая отличные шансы на победу в течение первых 20–35 минут в обеих играх.

A team standing on a platform stage under the spotlight in a dimly lit venue, waving and smiling

В отличие от нашего бенчмарка 17 дней назад, эти матчи:

  • Проводились против значительно более сильных людей-игроков
  • Использовали наборы героев, предоставленные третьей стороной, а не выбирались Five в процессе драфта против людей
  • Сняли последнее крупное ограничение на то, что большинство профессионалов считает геймплеем «настоящей Dota».

Примечательно, что игры получились захватывающими и близкими по счёту (для сравнения, все три игры в бенчмарке были очень односторонними). Это показывает, что хотя Five учится играть в Dota с нуля, её стиль приводит к невероятному геймплею против лучших профессионалов. Побеждать — это здорово, но поражения демонстрируют потрясающее мастерство топ-профессионалов и помогают нам сравнить игру Five с лучшими из лучших.

Мы невероятно благодарны всем членам сообщества Dota за помощь в создании столь прекрасной тренировочной площадки для прогресса ИИ: от стремления Valve создать и развивать эту невероятно сложную игру до поддержки аналитиков и профессионалов, которые помогают нам измерять наш прогресс, и до того восторга, который мы видели у стольких зрителей, что делает работу над проектом гораздо более увлекательной.

Loss 1

Прогресс Five от крайне ограниченной версии Dota против игроков низкого ранга в мае до участия в матчах с последним набором ограничений.

Игры

Целью этих матчей было продемонстрировать возможности Five в игре против лучших людей мира в «настоящую Dota». Отправляясь на The International, мы не знали точно, с кем именно нам доведется сыграть, так как это зависело от наличия людей, готовых сыграть с нами на главной сцене. Мы были рады сыграть против команд, значительно более сильных, чем на бенчмарке.

Five сыграла свой первый матч в среду против paiN Gaming — одной из 18 лучших команд по Dota 2 в мире, выбывшей из The International ранее по ходу турнира. Игроки paiN заработали в среднем по 350 000 долларов призовых за свою карьеру. Матч длился около 51 минуты (обычно игры длятся 45 минут), и после сильного старта со стороны людей Five отыграла часть преимущества в середине игры, прежде чем уступить серии высокоуровневых стратегических пушей от людей-игроков. В четверг мы провели второй матч против командыкитайскихзвездныхигроков,  трое из которых ранее играли вместе в одной соревновательной команде. После захватывающих качелей в командных боях Five проиграла спустя 45 минут. Средний заработок каждого из этих игроков на турнирах составлял около 1 миллиона долларов.

Изменение правил

Large, dimly lit Dota 2 competition venue with large OpenAI logo in the center

В играх бенчмарка было очень весомое ограничение, от которого мы теперь избавились: у каждого героя был свой неуязвимый курьер (юнит, доставляющий предметы вашему герою), а не один общий уязвимый командный курьер.

Дополнительные курьеры побудили Five выработать свой фирменный агрессивный стили игры, так как курьеры постоянно доставляли предметы для восстановления здоровья и маны, позволяя героям Five непрерывно атаковать базу противника. Во время обычной игры в Dota герои с низким уровнем здоровья вынуждены прерывать атаку, чтобы подлечиться. Многим наблюдателям казалось, что из-за дополнительных курьеров игра перестает быть похожей на «настоящую Dota».

Шесть дней назад мы начали тренировки с одним курьером (сам курьер, как и его предшественники, управляется скриптами). Хотя мы ожидали, что переход на одного курьера временно снизит результативность Five, отзывы сообщества дали понять, что геймплей с одним курьером будет гораздо более захватывающим.

Следующие шаги

Мы не считаем, что поражения связаны с изменением курьера. По нашему мнению, нам требуется больше тренировок, исправление ошибок и удаление последних элементов сценарной логики из нашей модели.

Как мы говорили на панельной дискуссии в среду, мы с нетерпением ждем возможности вывести Five на новый уровень. Эти игры установили новую планку для матчей между людьми и ИИ в Dota и дают нам огромный стимул для развития. Но Five — это не просто Dota; речь идет о создании технологий искусственного интеллекта в безопасной песочнице, которая поможет нам в будущем создавать еще более продвинутые системы. Если вы хотите помочь нам в создании таких систем, гарантировать их безопасность и пользу для всего человечества, подумайте о том, чтобы присоединиться к OpenAI.

Автор

OpenAI

Полный текст статьи читайте на OpenAI