Käsikirjoituksesta elokuvaan: Kuinka Utopain PAI muuttaa kirjoitettuja tarinoita tekoälyllä luoduiksi elokuviksi

Nopea generatiivisen tekoälyn kehitys on tuottanut työkaluja, jotka voivat luoda kuvia, musiikkia ja lyhyitä videoklippejä. Uusi työkalujen luokka on kuitenkin aloittamassa jotain paljon kunnianhimoisempaa: käsikirjoituksen muuttamista yhtenäiseksi elokuvaksi.

Tähän tilaan uusin tulokas on PAI, elokuvallinen kerrontamoottori, jonka on kehittänyt Utopai Studios. Sen sijaan, että työkalu keskittyisi lyhyisiin visuaalisiin klippeihin, se on suunniteltu kerrontatyökaluksi, joka mahdollistaa luojien siirtymisen käsikirjoituksesta henkilöhahmoihin, tarinakarttaan ja lopulta valmiiseen monikohtauksiseen videosarjaan yhden käyttöliittymän avulla.

Kun olen viettänyt aikaa työskentelemällä alustalla, käy selväksi, että tällaiset työkalut edustavat jotain perustavanlaatuisesti erilaista aiempiin tekoälyvideoihin verrattuna. Sen sijaan, että jokainen kohtaus tai klippi ohjattaisiin yksittäin, järjestelmä aloittaa itse tarinan.

Käsikirjoituksesta henkilöhahmoihin

Ensimmäinen askelni oli ladata osa käsikirjoitusta.

Alustan idea on yllättävän intuitiivinen. Sen sijaan, että käyttäjiltä pyydettäisiin ohjaamaan jokainen yksittäinen kuva, PAI analysoi tarinan ja poistaa sen keskeiset komponentit. Henkilöhahmot, ympäristöt, emotionaaliset sävyt ja kerronnalliset tahtipuikat tunnistetaan automaattisesti.

Tästä eteenpäin alusta aloittaa henkilöhahmojen luomisen.

Jokaiselle hahmolle annetaan pysyvä visuaalinen identiteetti, joka on sidottu tarinaan, jolloin he voivat esiintyä johdonmukaisesti jokaisessa kohtauksessa. Tämänkaltaisen jatkuvuuden ylläpitäminen on ollut yksi suurimmista teknisistä haasteista tekoälyvideoiden luomisessa. Hahmot usein muuttavat ulkonäköään klipien välillä, ympäristöt muuttuvat odottamattomasti, ja kerronnallinen virtaus hajoaa.

PAI yrittää ratkaista tämän ongelman sitomalla hahmosuunnittelun ja kohtauksen kontekstin itse tarinan rakenteeseen.

Kun alkuperäinen joukko on luotu, luojat voivat viimeistellä ne luonnollisen kielen ohjeiden tai visuaalisten sovittimien avulla, kunnes hahmot vastaavat heidän luovaa näkemystään. Kokemus tuntuu vähemmän tekoälymallin ohjaamiselta ja enemmän digitaalisen valintaprosessin ja taiteen työskentelemiseltä.

Tarinakartta käsikirjoituksesta

Kun hahmot oli määritelty, alusta siirtyi automaattisesti seuraavaan vaiheeseen elokuvantekoprosessissa: tarinakartan luomiseen.

Sen sijaan, että kuvaaminen olisi suunniteltu manuaalisesti, järjestelmä muutti käsikirjoituksen visuaaliseksi tarinakartaksi. Ruudulla näkyi kohtauksia, jotka edustivat tärkeitä hetkiä, jotka oli poimittu kerronnasta.

Tämä vaihe tuntui hämmästyttävän samankaltaiselta kuin perinteisen elokuvantekoprosessin alkuvaihe. Ohjaajat käyttävät yleensä tarinakarttoja suunnitellakseen kamerakulmia, tahdin ja visuaalista sommittelua ennen kuvaamisen aloittamista. Tässä tapauksessa tarinakartta syntyi automaattisesti käsikirjoituksesta itsestään.

Jokainen kuva voitiin sitten muokata, uudelleenjärjestää tai tarkentaa luonnollisen kielen ohjeiden avulla. Jos kohtaukselle tarvittiin toinen kamerakulma, valaistustyyli tai emotionaalisempi sävy, se voitiin sovittaa ennen kuin järjestelmä siirtyi viimeiseen vaiheeseen elokuvan luomisessa.

Tarinakartan muuttaminen elokuvaksi

Kun tarinakartta oli valmis, alusta loi valmiin videosarjan.

Yhdellä käskyllä tarinakartta muutettiin elokuvalliseksi videoksi, joka koostui useista kohtauksista. Järjestelmä tukee tällä hetkellä monikohtauksisia sarjoja, joissa on jopa 16 kuvausta ja videoita, jotka lähestyvät yhden minuutin pituutta – huomattavasti pitempiä kuin monet olemassa olevat tekoälyvideotyökalut.

Siinä, missä useimmat tekoälyvideojärjestelmät luovat erillisiä klippejä, PAI yrittää ylläpitää jatkuvuutta koko sarjan ajan. Hahmot säilyvät tunnistettavina kohtauksesta toiseen, ympäristöt säilyvät samana, ja tarina etenee yhtenäisenä kerronnallisena eikä erillistenä visuaalisina.

Kun prosessi etenee, se tuntuu vähemmän videoklipin luomiselta ja enemmän pienen elokuvaputken havainnolta, joka on tiivistetty yhteen työkaluun.

Joitakin varhaisia rajoituksia

Vaikka kokemus on vaikuttava, on edelleen alueita, jotka voivat parantaa.

Yksi yllätys prosessin aikana oli tuki puuttui teollisuusstandardien mukaisille käsikirjoitusmuodoille, kuten Final Draft (.fdx) tai avoimelle käsikirjoitusmuodolle Fountain, jota monet käsikirjoittajat käyttävät kirjoittaessaan käsikirjoituksia.

Sen sijaan käsikirjoitus piti ladata yksinkertaisemmassa muodossa. Ottaen huomioon, kuinka keskeinen käsikirjoitusohjelmisto on elokuvantekoprosessissa, tuki näille muodoille todennäköisesti tekisi alustasta houkuttelevamman ammattimaisille kirjoittajille ja studioille.

Sanon, kun käsikirjoitus oli ladattu, prosessi hahmojen luomisesta tarinakartan luomiseen ja lopulta videon tuotantoon oli sileää ja yllättävän intuitiivista.

Alusta kerrontaa varten

Yhtiö, joka on luonut PAI:n, on asettanut alustan enemmän kuin vain toisen generatiivisen videotyökalun.

Utopai Studios on luotu kehittämään tekoälymalleja, jotka on suunniteltu erityisesti kerrontaelokuville, keskittyen työkaluihin, joita ammattimaiset luojat käyttävät pitkien tarinoiden kehittämisessä.

Jotkut avainsuunnittelutavoitteet näyttävät muovivan alustaa:

• Visuaalisen jatkuvuuden ylläpitäminen kohtauksissa
• Luoja voi muokata tarinan elementtejä ilman koko generoinnin uudelleenkäynnistystä
• Estää tekijänoikeuksien suojaamien henkilöhahmojen, suojattujen immateriaalioikeuksien tai oikeiden julkisuuden henkilöhahmojen luominen
• Toimittaa tulokset, jotka soveltuvat julkiseen julkaisuun eikä vain kokeellisiin prototyyppeihin

Tämä lähestymistapa heijastaa laajempaa muutosta siinä, miten tekoälyvideo kehittyy. Varhaiset työkalut keskittyivät lähinnä lyhyiden klippien tai kokeellisten visuaalisten luomiseen. Seuraava aalto alustoja on aloittamassa haastavamman tehtävän: jatkuvan kerronnan.

Hehkulampun heitto tulevaisuuden elokuvantekoon

Mikä tekee alustoista kuten PAI houkuttelevia, on se, kuinka nopeasti kirjoitettu idea voi kehittyä visuaaliseksi.

Tarina, joka aiemmin oli olemassa vain tekstinä, voi yhtäkkiä muuttua joukoksi hahmoja, kohtauksia ja lopulta lyhyeksi elokuvaksi. Se, mitä aiemmin vaati koko joukon taiteilijoita, editoreja ja tuotantoryhmiä, voi nyt aloittaa yksinomaan käsikirjoituksella ja muutamalla luovalla ohjeella.

Se ei tarkoita, että tekoäly korvaa elokuvantekijät. Sen sijaan työkalut kuten tämä voivat laajentaa merkittävästi keinoja, joilla tarinoita voidaan tutkia varhaisessa kehitysvaiheessa.

Käsikirjoittajat voivat visualisoida kohtauksia ennen niiden esittelyä. Ohjaajat voivat kokeilla eri visuaalista tyyliä ennen tuotannon aloittamista. Riippumattomat luojat voivat tuottaa elokuvallista sisältöä ilman perinteisten studioresurssien tarvetta.

Monilla tavoin nämä alustat muistuttavat digitaalisen elokuvantekijän tai desktop-julkaisun varhaisia päiviä – teknologioita, jotka alensivat luovan tuotannon esteitä.

Uuden luovan ekosysteemin alku

Kun tekoälyvideoiden luominen jatkaa parantumistaan, on todennäköistä, että enemmän alustoja tulee kehittymään, jotka keskittyvät erityisesti kerrontaan eikä erillisiin klippeihin.

Uusia työkaluja tulee olemaan käsikirjoituksesta ruutuun -työkaluille, hahmojen luomiselle, virtuaaliselle kuvaamiselle ja automaattisille editointiprosesseille. Yhdessä ne voivat muodostaa täysin uuden luovan ekosysteemin tekoälykokoisen elokuvantekijän ympärille.

Jo nyt näemme varhaisia merkkejä tästä muutoksesta, kun alustat kokeilevat jakelukanavia, jotka on omistettu täysin tekoälyllä luoduille elokuville ja sarjoille. Nämä varhaiset ponnistelut tarjoavat vihjeen siitä, miten tämä uusi elokuvamuoto voi kehittyä, kuten Escape.ai, joka tutkii Netflix-tyylistä ympäristöä, joka on suunniteltu erityisesti tekoälyllä luoduille videoille.

Vaikka teknologia on edelleen alkuvaiheessa, suunta on selkeä. Työkalut, jotka aiemmin luovat erillisiä klippejä, kehittyvät täysin luoviksi prosesseiksi.

Ja jos alustat kuten PAI jatkavat parantumistaan, matka käsikirjoituksesta elokuvaan voi pian tulla dramaattisesti nopeammaksi – ja saataville enemmän kertojille kuin koskaan aiemmin.