Искусственный интеллект DeepMind достиг высшего ранга в StarCraft II

Искусственный интеллект AlphaStar, разработанный компанией DeepMind, достиг высшего уровня в StarCraft II, чрезвычайно популярной и сложной компьютерной игре. ИИ превзошел 99,8% всех зарегистрированных человеческих игроков.

ИИ-системе потребовалось 44 дня обучения, чтобы достичь этого уровня. Она использовала записи некоторых из лучших человеческих игроков и училась на них, пока не начала играть против самой себя.

«AlphaStar стал первым ИИ-системой, достигшей высшего уровня человеческого мастерства в любой профессионально сыгранной киберспортивной игре на полной, неограниченной игре в профессионально утвержденных условиях», – сказал Дэвид Сильвер, исследователь в DeepMind.

«С тех пор, как компьютеры освоили Го, шахматы и покер, игра StarCraft стала, по сути, следующим большим вызовом для ИИ», – сказал Сильвер. «Ее считают игрой, которая находится на пределе человеческих возможностей».

Работа была опубликована в научном журнале Nature.

Что такое StarCraft?

Просто говоря, цель StarCraft – построить цивилизации и сражаться против инопланетян.

Это игра в реальном времени, в которой игроки контролируют сотни единиц и должны принимать важные экономические решения. В игре существует десятки тысяч временных шагов и тысячи возможных действий. Эти действия выбираются в реальном времени в течение десяти минут игры.

Агенты AlphaStar

DeepMind разработала агенты AlphaStar и создала один для каждой из разных рас в игре. Каждая раса имеет уникальный набор сильных и слабых сторон. В «лиге AlphaStar» ИИ соревновался с собой и «эксплуататорами», которые нацеливались на слабости AlphaStar.

Одной из наиболее впечатляющих особенностей ИИ было то, что он не был разработан для выполнения действий на сверхчеловеческой скорости. Вместо этого он научился разным выигрышным стратегиям.

Как и в игре StarCraft, реальные приложения требуют от искусственных агентов взаимодействия, конкуренции и координации в сложной среде, содержащей других агентов. Это почему StarCraft стала такой важной частью исследований искусственного интеллекта.

Военный интерес

Одной из более неожиданных аспектов этой работы является то, что она будет интересна военным.

«Военные аналитики, безусловно, будут внимательно следить за успешными стратегиями AlphaStar в реальном времени как за явным примером преимуществ ИИ для планирования боя. Но это чрезвычайно опасная идея с потенциалом для гуманитарной катастрофы. AlphaStar учится стратегии из больших данных в одной конкретной среде. Данные из конфликтов, таких как Сирия и Йемен, будут слишком скудными, чтобы быть полезными», – сказал Ноэль Шарки, профессор ИИ и робототехники в Университете Шеффилда.

«И как DeepMind объяснил на недавнем мероприятии ООН, такие методы будут чрезвычайно опасны для контроля над оружием, поскольку ходы непредсказуемы и могут быть творческими в неожиданных способах. Это противоречит законам, регулирующим вооруженные конфликты».

Долгий путь за короткое время

Вернемся к январю, профессиональный игрок StarCraft II Гжегож Коминцз победил AlphaStar в игре. Это был огромный шаг назад для Google (GOOGL ), которая инвестировала миллионы долларов в эту технологию. С тех пор ИИ DeepMind прошла долгий путь за короткое время, и эти новые разработки имеют огромные последствия.