Минулого року некомерційна організація OpenAI зіштовхнула свою систему штучного інтелекту з професіоналами з Dota 2. І тоді машина не змогла перевершити людей. Тепер система взяла реванш.
У Сан-Франциско на вихідних пройшов чемпіонат OpenAI Five, під час якого відбулася зустріч ІІ з п'ятьма кіберспортсменами з команди OG. Ця команда в 2018 році взяла найвищу нагороду в кіберспорті, посівши перше місце на турнірі The International з Dota 2 із призовим фондом $25 млн. Члени команди зустрілися з ботами OpenAI, яких навчали за єдиною методикою. І люди програли.
Повідомляться, що роботи OpenAI навчалися з підкріпленням і незалежно один від одного. Тобто вони потрапили в гру без попереднього програмування та налаштувань і змушені були навчатися методом спроб та помилок. Співзасновник та голова OpenAI Грег Брокман (Greg Brockman) заявив, що за 10 місяців свого існування штучний інтелект вже зіграв 45 тисяч років ігрового процесу у Dota 2.
Що стосується самої гри в Сан-Франциско, то кожен загін мав 17 героїв на вибір (загалом у грі їх понад сотню). При цьому ІІ обрав режим, у якому кожна команда може забороняти вибір тих героїв, яких обрала сама. Це дозволяє нарощувати сильні сторони та мінімізувати слабкі. Також були відключені ілюзії та функції виклику нових героїв, хоча воскрешати полеглих можна було.
Повідомляться, що ІІ використав тактику, яка призводила до короткострокової вигоди, проте вона справдилась. При цьому система пожвавлювала загиблих героїв навіть на початку сутички. Загалом машина використала вельми агресивний підхід, своєрідний «бліцкриг», який люди не змогли відобразити, оскільки перший матч тривав лише півгодини.
Другий виявився ще коротшим, оскільки ІІ розгромив людей дуже швидко, акцентуючись на атаці, а не на захисті. У цілому виявилося, що схема навчання з підкріпленням дає результат. Це дозволить використовувати її й у майбутньому для різноманітних завдань.
Джерело: 3dnews.ru