DeepMinds AI bereikt hoogste rang in StarCraft II

DeepMinds AlphaStar, een kunstmatig intelligentiesysteem, heeft de hoogste niveau bereikt in StarCraft II, een extreem populaire en complexe computerspel. De AI presteerde beter dan 99,8% van alle geregistreerde menselijke spelers.

Het duurde het AI-systeem 44 dagen van training om dit niveau te bereiken. Het gebruikte opnames van enkele van de beste menselijke spelers en leerde van hen totdat het uiteindelijk tegen zichzelf speelde.

“AlphaStar is het eerste AI-systeem dat het hoogste niveau van menselijke prestaties heeft bereikt in een professioneel gespeeld e-sport op het volledige onbeperkte spel onder professionele omstandigheden,” zei David Silver, een onderzoeker bij DeepMind.

“Sinds computers Go, schaken en poker hebben gekraakt, is het spel StarCraft door de gemeenschap als de volgende grote uitdaging voor AI beschouwd,” zei Silver. “Het wordt beschouwd als het spel dat het meest aan de grens van menselijke mogelijkheden ligt.”

Het onderzoek werd gepubliceerd in het wetenschappelijke tijdschrift Nature.

Wat is StarCraft?

Kort gezegd, het doel van StarCraft is om beschavingen te bouwen en tegen aliens te vechten.

Het is een real-time strategie spel waarin spelers honderden eenheden controleren en belangrijke economische beslissingen moeten nemen. Binnen het spel zijn er tienduizenden tijd-stappen en duizenden mogelijke acties. Deze worden geselecteerd in real-time gedurende tien minuten spel.

AlphaStar “Agents”

DeepMind ontwikkelde AlphaStar “Agents” en creëerde er een voor elke verschillende ras in het spel. De verschillende rassen hebben elk een unieke set van sterke en zwakke punten. In de “AlphaStar league” concurreerde de AI met zichzelf en “exploiter” agents die de zwakke punten van AlphaStar aanvielen.

Een van de meest indrukwekkende punten van de AI was dat het niet was ontwikkeld om acties uit te voeren op bovenmenselijke snelheid. In plaats daarvan leerde het verschillende winnende strategieën.

Net als in het StarCraft spel, vereisen real-world toepassingen dat kunstmatige agenten interactie, concurreren en coördineren binnen een complexe omgeving met andere agenten. Dit is waarom StarCraft zo’n belangrijk aspect van kunstmatige intelligentie onderzoek is geworden.

Militair belang

Misschien een van de onverwachtere aspecten van dit onderzoek is dat het de aandacht van het leger zal trekken.

“Militaire analisten zullen zeker de succesvolle AlphaStar real-time strategieën als een duidelijk voorbeeld van de voordelen van AI voor slagveldplanning bekijken. Maar dit is een extreem gevaarlijk idee met het potentieel voor humanitaire rampen. AlphaStar leert strategie van big data in een specifieke omgeving. De data van conflicten zoals Syrië en Jemen zou te schaars zijn om van nut te zijn,” zei Noel Sharkey, een professor in AI en robotica aan de Universiteit van Sheffield.

“En zoals DeepMind op een recente Verenigde Naties evenement uitlegde, zouden dergelijke methoden zeer gevaarlijk zijn voor wapencontrole, omdat de moves onvoorspelbaar zijn en op onverwachte manieren creatief kunnen zijn. Dit is in strijd met de wetten die gewapende conflicten reguleren.”

Ver gekomen in korte tijd

Terug in januari, versloeg professioneel StarCraft II speler Grzegorz Komincz AlphaStar in het spel. Het was een enorme terugslag voor Google (GOOGL ), die miljoenen dollars in de technologie had geïnvesteerd. Sindsdien is DeepMinds AI ver gekomen in korte tijd, en deze nieuwe ontwikkelingen hebben enorme implicaties.