DeepMinds AI bereikt hoogste rang in StarCraft II

DeepMinds AlphaStar, een kunstmatig intelligentiesysteem (AI), heeft de hoogste niveau bereikt in StarCraft II, een extreem populaire en complexe computergame. De AI presteerde beter dan 99,8% van alle geregistreerde menselijke spelers.

Het kostte het AI-systeem 44 dagen training om dit niveau te bereiken. Het gebruikte opnames van enkele van de beste menselijke spelers en leerde van hen totdat het uiteindelijk tegen zichzelf speelde. 

“AlphaStar is het eerste AI-systeem dat het hoogste niveau van menselijke prestaties heeft bereikt in een professioneel gespeelde e-sport op de volledige onbeperkte game onder professioneel goedgekeurde omstandigheden,” zei David Silver, een onderzoeker bij DeepMind.

“Sinds computers Go, schaken en poker hebben gekraakt, is het spel StarCraft door consensus van de gemeenschap het volgende grote uitdaging voor AI geworden,” zei Silver. “Het wordt beschouwd als het spel dat het meest aan de limiet van menselijke capaciteiten ligt.”

Het onderzoek werd gepubliceerd in het wetenschappelijke tijdschrift Nature. 

Wat is StarCraft?

In het kort komt het erop neer dat het doel van StarCraft is om beschavingen te bouwen en tegen aliens te vechten. 

Het is een real-time strategiegame waarin spelers honderden eenheden besturen en belangrijke economische beslissingen moeten nemen. Binnen het spel zijn er tienduizenden tijdstappen en duizenden mogelijke acties. Deze worden geselecteerd in real-time tijdens tien minuten gameplay. 

AlphaStar “Agents”

DeepMind ontwikkelde AlphaStar “Agents” en maakte er een voor elk van de verschillende rassen in het spel. De verschillende rassen hebben elk een unieke set van sterke en zwakke punten. In de “AlphaStar-competitie” speelde de AI tegen zichzelf en “exploiter”-agents die de zwakke punten van AlphaStar aanvielen. 

Een van de meest indrukwekkende punten van de AI was dat het niet was ontwikkeld om acties uit te voeren met bovenmenselijke snelheid. In plaats daarvan leerde het verschillende winnende strategieën. 

Net als in het StarCraft-spel, vereisen echte toepassingen dat kunstmatige agenten interactie hebben, concurreren en coördineren binnen een complexe omgeving met andere agenten. Daarom is StarCraft zo’n belangrijk onderdeel van kunstmatige intelligentieonderzoek geworden. 

Militair belang

Misschien een van de onverwachtere aspecten van dit onderzoek is dat het de aandacht van het leger zal trekken. 

“Militaire analisten zullen zeker geïnteresseerd zijn in de succesvolle AlphaStar-realtime-strategieën als een duidelijk voorbeeld van de voordelen van AI voor slagveldplanning. Maar dit is een extreem gevaarlijk idee met het potentieel voor humanitaire rampen. AlphaStar leert strategie uit big data in een specifieke omgeving. De data uit conflicten zoals Syrië en Jemen zou te schaars zijn om van nut te zijn,” zei Noel Sharkey, een professor in AI en robotica aan de University of Sheffield.

“En zoals DeepMind op een recente VN-evenement uitlegde, zouden dergelijke methoden zeer gevaarlijk zijn voor wapenbeheersing, omdat de bewegingen onvoorspelbaar zijn en op onverwachte manieren creatief kunnen zijn. Dit is in strijd met de wetten die gewapende conflicten regelen.”

Veel vooruitgang in korte tijd

In januari versloeg de professionele StarCraft II-speler Grzegorz Komincz AlphaStar in het spel. Het was een enorme tegenslag voor Google, die miljoenen dollars in de technologie had geïnvesteerd. Sindsdien is DeepMinds AI een lange weg gegaan in een korte tijd, en deze ontwikkelingen hebben enorme implicaties.