Van schets tot platformgame: de artistieke benadering van Google Genie voor het genereren van games

Geest, een opmerkelijke creatie van Google DeepMind, heeft tot de verbeelding gesproken van zowel onderzoekers als gamers. De volledige naam, ‘GENerative Interactive Environment’, verwijst naar zijn buitengewone capaciteiten. In tegenstelling tot een gemiddelde AI-modelbezit Genie de unieke kracht om afzonderlijke afbeeldingen of tekstprompts om te zetten in interactieve, speelbare 2D-werelden.

Genie onderscheidt zich door zijn vermogen om virtuele werelden te animeren door kennis uit ongelabelde internetvideo's te assimileren. Het fungeert als een digitale spons die de nuances van verschillende omgevingen en interacties absorbeert.

In de kern is Genie een fundamenteel wereldmodel met een neurale architectuur Met 11 miljard parameters. De integrale componenten ervan, zoals de Spatiotemporele videotokenizer, Autoregressief dynamisch modelen het cruciale Latent actiemodelwerken harmonieus samen om meeslepende omgevingen te creëren waar gebruikers moeiteloos mee aan de slag kunnen.

Genie demonstreert een aanzienlijk vermogen om van rijke bossen met verborgen schatten over te schakelen naar fantasierijke spelniveaus geïnspireerd door de krabbels van jonge kunstenaars. Het demonstreert een uitzonderlijk transformatief vermogen, omdat het samen leert zonder dat er specifieke actielabels of domeinspecifieke vereisten nodig zijn, waardoor een uitgebreide en grenzeloze creatieve ervaring wordt geboden.

Hoe werkt Genie?

In de fascinerende wereld van Genie veranderen statische beelden in dynamische, interactieve scènes door een samensmelting van kunstenaarschap en computervaardigheid. Stel je deze statische beelden voor als frames in een buitenaardse video, die elk boeiende nieuwe scènes onthullen die verder gaan dan traditionele schetsen en evolueren naar meeslepende verhalen.

De kern van Genie ligt in de op video gebaseerde aanpak, waarbij de eerste beelden worden behandeld als frames in een boeiend flipbook. Dit brengt op opmerkelijke manieren leven in schetsen. Een eenvoudige kasteelschets kan bijvoorbeeld veranderen in een uitgestrekt fort met verborgen kamers, geheime doorgangen en hoge torens. Op dezelfde manier kan een kromme lijn veranderen in een kronkelende rivier met geanimeerde vissen en drijvende platforms voor avonturen. De op video gebaseerde methodologie van Genie combineert verbeelding en realiteit en nodigt gebruikers uit in een fascinerende wereld.

De magische vermogens van Genie komen voort uit zijn rigoureuze training. Het haalde inspiratie uit een enorme collectie van 200,000 uur kunt opladen van online openbaar beschikbare 2D-platformervideo's. Genie selecteerde zorgvuldig 30,000 uur gestandaardiseerde video uit honderden 2D-games uit deze schatkamer. Deze gameplay-ervaringen werden het canvas van Genie, doordrenkt met de essentie van gepixelde avonturen, precieze sprongen en de geest van iconische gamepersonages.

Net als een videogame kan Genie als een tovenaar interactieve acties voorspellen en creëren. Stel je voor dat je op knoppen op een gamecontroller drukt: Genie doet iets soortgelijks. Er zijn statische elementen nodig (als een boom) en transformeert ze op magische wijze in dynamische functies. Als u bijvoorbeeld op “up' kan een stilstaande boom veranderen in een wuivende, beklimbare liaan met trillende bladeren. En wanneer personages over gevaarlijke gaten moeten springen, animeert Genie hun gepixelde bewegingen met moed. We kunnen het ons voorstellen alsof Genie danst tussen de echte wereld en een magische wereld, waardoor dingen tot leven komen.

Genie gedraagt ​​zich als een kristallen bol en gebruikt zijn voorspellende model om te voorspellen wat er daarna komt. Er wordt gekeken naar willekeurige frames en mogelijke acties, en er worden weloverwogen gissingen gedaan over de volgende afbeelding. Dit is vergelijkbaar met de manier waarop films worden gemonteerd, waarbij elke opname naar de volgende leidt, waardoor een verhaal ontstaat met flow, spanning en opwinding. Terwijl Genie's voorspellingen uitkomen, veranderen wat begon als stilstaande beelden in ontroerende en opwindende scènes.

Het artistieke potentieel van Genie

De artistieke vaardigheden van Genie zijn uitstekend, zoals het veranderen van de krabbel van een kind in een levendige wereld. Stel je voor dat een paar regels op papier veranderen in een spannend avontuur met dingen om te ontdekken, uitdagingen om te overwinnen en interessante karakters.

Voor verhalenvertellers biedt Genie verschillende opties. Eén fotoprompt kan bijvoorbeeld een hele spelwereld creëren waarin spelers verhalen kunnen ontdekken en mysteries kunnen oplossen. Het lijkt meer op een visueel verhaal dat zich kan ontvouwen zoals de verteller het zich voorstelt.

Bovendien is Genie niet alleen voor games; het is een veelzijdig hulpmiddel voor kunstenaars en verhalenvertellers, waarmee eenvoudige ideeën kunnen worden omgezet in interactieve ervaringen die het verleden en het heden met elkaar verbinden.

Genie's transformatieve toepassingen

De verleidelijke vaardigheden van Genie kunnen leiden tot een nieuw tijdperk van toepassingen. Een aantal toepassingsdomeinen zijn als volgt:

Genie is een magische inspiratiebron die eindeloze creativiteit creëert door basisideeën om te zetten in gedetailleerde 2D-spellen. Kindertekeningen en geschreven aanwijzingen vormen het decor voor spannende avonturen en fantasierijke buitenaardse plekken, en inspireren makers om een ​​enorme wereld van verbeelding te verkennen.

Naast gamen ligt Genie's kernvaardigheid in fundamentele wereldmodellering, die geheimen bevat die een revolutie zouden kunnen teweegbrengen machine learning. We kunnen ons voorstellen dat het dynamische scènes voorspelt die nuttig zijn voor het begeleiden van zelfrijdende auto's over gepixeleerde wegen of voor het trainen van aspirant-artsen in medische simulaties.

De magie van Genie is niet alleen voor games; het helpt ook bij leren en kunst. Geschiedenislessen kunnen spannende avonturen worden, omdat tijdlijnen op verschillende tijdstippen interactieve reizen worden. In kunstgalerijen kunnen de gepixelde creaties van Genie naast gewone schilderijen hangen, waardoor de ideeën van creativiteit door elkaar worden gehaald.

Uitdagingen en toekomstige richtingen

Naast uitstekende functies staat Genie voor een aantal uitdagingen. Ervoor zorgen dat alles er geweldig uitziet en consistent blijft, is als jongleren, van een krabbel een meesterwerk maken, maar het vinden van de juiste balans is lastig. Daarom moet Genie beslissen hoe hij speelse chaos combineert met zorgvuldige planning.

Op dezelfde manier is het een uitdaging om games precies geschikt te maken voor spelers om te spelen. Als ze te gemakkelijk zijn, zijn ze misschien niet leuk; als ze te moeilijk zijn, kunnen spelers opgeven. Daarom moet Genie als een game-ontwerper zijn, die aanpast hoe hoog personages springen, waar vijanden opduiken en waar power-ups verschijnen.

Terwijl de magie van Genie zich verspreidt, rijzen er ook enkele vragen. Wie verdient bijvoorbeeld de eer voor een spel dat Genie maakt? Is het de eerste ideegever, het magische model dat er leven in brengt, of de speler die zich onderdompelt in de virtuele wereld? Genie moet oordeelkundig door deze vragen navigeren en zich bezighouden met wie de eigenaar is van het spel en de ideeën ervan.

The Bottom Line

Concluderend Geest, de innovatieve creatie van Google DeepMind, overstijgt traditionele AI-modellen met zijn transformerende kracht. Van verbeterde game-ervaringen tot het revolutioneren van machine learning en het bevorderen van creativiteit op verschillende domeinen: Genie is uitgegroeid tot een veelzijdige kracht.

Terwijl ze met uitdagingen wordt geconfronteerd, maakt de unieke benadering van voorspellende dynamiek en artistiek potentieel de weg vrij voor een toekomst waarin verbeelding en technologie naadloos samenvloeien, waardoor spannende wegen worden geopend voor interactieve verkenning en creativiteit.