В Сан-Франциско на выходныхпрошёл чемпионат OpenAI Five, в ходе которого состоялась встреча ИИ с пятью киберспортсменами из команды OG. Эта команда в 2018 году взяла высшую награду в киберспорте, заняв первое место на турнире The International по Dota 2 с призовым фондом $25 млн. Члены команды встретились с ботами OpenAI, которых обучали по единой методике. И люди проиграли.

Сообщатся, что боты OpenAI обучались с подкреплением и независимо друг от друга. То есть они попали в игру без предварительного программирования и настроек и вынуждены были учиться методом проб и ошибок. Соучредитель и председатель OpenAI Грег Брокман (Greg Brockman) заявил, что за 10 месяцев своего существования искусственный интеллект уже сыграл 45 тысяч лет игрового процесса в Dota 2.

Что касается самой игры в Сан-Франциско, то каждый отряд имел 17 героев на выбор (всего в игре их более сотни). При этом ИИ выбрал режим, в котором каждая команда может запрещать выбор тех героев, которых выбрала сама. Это позволяет наращивать сильные стороны и минимизировать слабые. Также были отключены иллюзии и функции вызова новых героев, хотя воскрешать павших было можно.

Сообщатся, что ИИ использовал тактику, которая приводила к краткосрочной выгоде, однако она оправдалась. При этом система оживляла погибших героев даже в начале схватки. В целом же машина использовала весьма агрессивный подход, своеобразный «блицкриг», который люди не смогли отразить, поскольку первый матч продлился лишь полчаса.

Второй оказался ещё короче, поскольку ИИ разгромил людей очень быстро, акцентируясь на атаке, а не на защите. В целом же оказалось, что схема обучения с подкреплением даёт результат. Это позволит использовать её и в будущем для различных задач.

Источник: The Verge

источник: pbs.twimg.com