Штучний інтелект DeepMind досяг найвищого рівня у StarCraft II

Штучний інтелект AlphaStar компанії DeepMind досяг найвищого рівня у грі StarCraft II, яка є надзвичайно популярною та складною комп’ютерною грою. Штучний інтелект перевершив 99,8% усіх зареєстрованих гравців.

Штучному інтелекту знадобилось 44 дні тренувань, щоб досягти такого рівня. Він використовував записи деяких найкращих гравців та навчався на них, поки не почав грати проти себе.

“AlphaStar став першим штучним інтелектом, який досяг найвищого рівня людських можливостей у будь-якій професійній кіберспортивній грі під умовами, затвердженими професіоналами”, – сказав Девід Сільвер, дослідник компанії DeepMind.

“Відтоді, як комп’ютери подолали Го, шахи та покер, гра StarCraft стала, по суті, наступним великим викликом для штучного інтелекту”, – сказав Сільвер. “Ця гра вважається тією, яка знаходиться на межі людських можливостей.”

Робота була опублікована у науковому журналі Nature.

Що таке StarCraft?

Просто кажучи, суть гри StarCraft полягає у будівництві цивілізацій та боротьбі проти іншопланетян.

Це гра у реальному часі, у якій гравці контролюють сотні одиниць та повинні приймати важливі економічні рішення. У грі є десятки тисяч кроків часу та тисячі можливих дій, які вибираються у реальному часі протягом десяти хвилин гри.

Агенти AlphaStar

Компанія DeepMind розробила агентів AlphaStar, та створила окремого агента для кожної з різних рас у грі. Кожна раса має унікальний набір сильних та слабких сторін. У “лізі AlphaStar” штучний інтелект змагався проти себе та “експлуатуючих” агентів, які націлювалися на слабкості AlphaStar.

Одним з найвражаючих аспектів штучного інтелекту було те, що він не був розроблений для виконання дій зі надлюдською швидкістю. Замість цього, він вивчив різні виграшні стратегії.

Як і у грі StarCraft, у реальних застосуваннях штучні агенти повинні взаємодіяти, конкурувати та координуватися у складному середовищі, яке містить інших агентів. Саме тому StarCraft став такою важливою складовою дослідження штучного інтелекту.

Військовий інтерес

Можливо, одним з найнеочікуваніших аспектів цієї роботи є те, що вона буде цікава для військових.

“Військові аналітики, безумовно, будуть вивчати успішні стратегії AlphaStar у реальному часі як приклад переваг штучного інтелекту для планування битв. Але це надзвичайно небезпечна ідея з потенціалом для гуманітарної катастрофи. AlphaStar вивчає стратегію з великих даних у конкретному середовищі. Дані з конфліктів, таких як Сирія та Ємен, будуть надто розрідженими, щоб бути корисними”, – сказав Ноел Шаркі, професор штучного інтелекту та робототехніки університету Шеффілда.

“І, як пояснив DeepMind на недавній конференції Організації Об’єднаних Націй, такі методи будуть надзвичайно небезпечними для контролю над зброєю, оскільки рухи непередбачувані та можуть бути творчими у несподіваних способах. Це суперечить законам, які регулюють збройні конфлікти.”

Довгий шлях у короткий час

У січні професійний гравець у StarCraft II Гжегож Комінч переміг AlphaStar у грі. Це була велика поразка для Google (GOOGL ), яка вклала мільйони доларів у цю технологію. З того часу штучний інтелект DeepMind пройшов довгий шлях за короткий час, і ці нові розвитки мають великі наслідки.