Void eld

Озаренный Дреней

Арт: Елизавета Кунаева IG @rererequiem

Музыка: London Music Works - Invincible Theme

Нейросеть AlphaStar одолела профессиональных игроков в StarCraft II

Программа AlphaStar, разработанная DeepMind, смогла обыграть двух профессиональных игроков в стратегию в реальном времени StarCraft II. Каждого из игроков-людей нейросеть победила в пяти матчах. Описание работы программы доступно на сайте DeepMind, а посмотреть на AlphaStar в деле можно на YouTube.

Для обеих частей StarCraft уже достаточно давно разрабатываются боты и даже проводятся соревнования подобных программ, однако до сих пор таким алгоритмам не удавалось победить человека. Дело в том, что несмотря на победу программы AlphaGo в настольной игре го(которая долгое время считалось слишком сложной для машин) со стратегией в реальном времени все обстоит иначе — это игра с закрытой информацией, в которой нужно решать большое количество задач одновременно. Компания Blizzard объявила о создании открытого API для StarCraft II еще летом 2017 года, но с тех пор заметного прогресса почти не было — даже нейросеть, разработанная DeepMind, долгое время не могла показать блестящего результата и проигрывалалегкому уровню сложности встроенных алгоритмов.

Теперь компания DeepMind (входит в состав холдинга Alphabet) продемонстрировала, что их новая программа AlphaStar способна обыграть профессиональных игроков. При создании AlphaStar использовался метод глубокого обучения с подкреплением, а также обучение с учителем, в качестве тренировочного датасета разработчики использовали предоставленные компанией Blizzard анонимизированные записи игр настоящих людей. Обученная на этих играх нейросеть научилась побеждать встроенные алгоритмы StarCraft II на самой высокой сложности в 95 процентах случаев, после чего специалисты DeepMind заставили программу играть с самой собой. Разработчики отмечают, что сначала в «лиге AlphaStar» доминировал раш — тактика быстрой победы путем строительства большого количества сравнительно дешевых юнитов. Однако затем нейросеть научилась бороться с такими атаками и начала делать упор в том числе и на экономическое развитие. Всего на «лигу AlphaStar» ушло 14 дней игры агентов друг с другом, что эквивалентно 200 годам игры в StarCraft II.

Сначала нейросеть выиграла пять матчей из пяти против TLO (Дарио Вунш, Германия), а затем другая версия нейросети победила пять раз подряд игрока MaNa (Гжегож Коминч, Польша). Оба профессионала входят в сотню сильнейших игроков в StarCraft II. Интересно, что средний APM (количество действий в минуту) нейросети оказался значительно меньше, чем у ее противников.

DeepMind

Поделиться

    

Стоит отметить что все же небольшое преимущество у AlphaStar было — несмотря на то, что туман войны закрывал карту для нейросети так же, как и для человека, программа получала для обработки не частичное изображение известной области (условный экран), а видела сразу все, что позволяет увидеть игра. Благодаря этому нейросети не приходилось постоянно переключаться между разными зонами карты для контроля за происходящим. Когда же для еще одного демонстрационного матча с MaNa разработчики заставили AlphaStar играть с обычным ограничением масштаба видимой области, то нейросеть проиграла человеку. Правда, в DeepMind отмечают, что самостоятельно двигающая камеру версия программы обучалась в «лиге AlphaStar» всего семь дней.

Первая часть StarCraft тоже представляет собой сложную задачу даже для методов глубокого обучения. Так, в октябре 2017 года своего бота для этой игры представила компания Facebook, и он оказался слабеепрограмм, созданных программистами-любителями. Специалистам из Alibaba Group и Университетского колледжа Лондона удалось научить свою программу неплохому уровню микроконтроля юнитов при ведении боя, но на полноценную игру их разработка все еще не способна.

Сурс

Мировозрение рас Варкрафта

Из "Warcraft Heroes Handbook":

...

Альянс:

Humans tend toward no particular alignment. The best and the worst are found among them.

Most dwarves are lawful, believing firmly in the benefits of a well-ordered society. They tend toward good as well, with a strong sense of fair play and a belief that all deserve to share in the benefits of a just order.

Night elves live in close ties with the natural world, they have an unprecedented connection to nature
and protect it fiercely, pulling many night elves towards good. They love freedom and variety, making most lean toward the gentler aspects of chaos as well.

Gnomes are good-hearted, and even the tricksters amongst them are more playful than vicious.
Those of evil alignment are often the result of madness. An innovative idea that consumed them.

Draenei are mostly good. Those who strive towards law are sages, priests, paladins, vindicators, or
scholars. Those who tend toward chaos are warriors, rangers, or in other ways people more fond of pure fighting.

Worgen tend to become chaotic, while originating from humans, the infection of their blood with the wolves has made them more unpredictable.

Most void elves tend to be lawful, much like
their blood elven kin. Those who do become chaotic are
those who lose control of their void powers and become
consumed by them.

...

Орда:

Orcs might not have an innate tendency toward evil, but many end up there. Evil or not, many orcs
lean toward a chaotic alignment.

Forsakens alignment varies, as their race origin, most tend to become more chaotic, and very few keep to good after decades of being an undead.

Most taurenare lawful, keeping to their tribal code. Those who are evil are shunned upon, most either
outlaws or corrupted in some form.

Trolls are a neutral race, their alignment varying drastically between them. Most trolls tend to be
lawful, their tribes often having particular customs and rules for them to abide by.

High elves lies in a very militant society, strict rules have been made for people to uphold, pushing most towards a lawful alignment.

Most goblins tend to be chaotic to a certain degree, even when lawful, they have a spark of chaoticness in them that they cannot get rid off.

Order and structure are key to nightborne. Their society believes that reputation and status are of the
utmost concern, and that mortality and principles of right and wrong are viewed too often in that light. Giving most nightborne a lawful alignment.

...

Независимые расы:

Pandaren are a peaceful race, and for most parts tend to their own, making many pandarens neutral or good aligned. Finding an evil aligned pandaren is unusual.