Miten reaaliaikaiset volumetriset ovat uudelleenkirjoittamassa elokuvan kerrontaa

Aikaisemmin volumetriset efektit olivat piilotettuina kaikilta muilta kuin VFX-johtajilta, jotka olivat kokoontuneet karkeat, matalaresoluutioiset esikatselunäytöt. Voit kuvata monimutkaisen kohtauksen, jossa peittävä sumu kiertelee muinaisissa metsissä, loistavat hiukkaset tanssivat haudattujen käytävien pitkin ja eetterinen magia kietoutuu velhon sauvaan. Kuitenkin kukaan kuvausryhmässä ei nähnyt yhtään höyryä ennen jälkityöstöä.

Tuotantoryhmä seurasi elottomia ympäristöjä, ja näyttelijät esittivät roolejaan tyhjää harmaata seinää vasten, tehtävänään kuvitella leijuvia pölyhiukkasia tai kiehuavaa savua. Kaikki tämä muuttui, kun reaaliaikaiset volumetriset menetelmät siirtyivät tutkimuslaboratorioista tuotantostudioihin, paljastaen ilmaston, joka hengittää ja reagoi kameran katseeseen kohtauksien kehittyessä. Nykyään elokuvantekijät voivat muokata ja hioa ilmakehän syvyyttä itse kuvausprosessin aikana, uudelleenkirjoittaen, miten elokuvamaailmat rakennetaan ja miten kerronta muotoutuu kameran edessä ja sen sisällä.

Perinteisissä työprosesseissa ohjaajat luottivat vaistoihinsa ja muistiinsa, kuvitellessaan savuisia sumuja tai loistavia liekkejä mielessään, kun kameroita käytettiin. Matalaresoluutioiset proxit (lo-fi hiukkastestit ja yksinkertaiset geometriset volumet) edustivat lopullisia efektejä, ja vasta pitkien renderöintiyöiden jälkeen lopulliset volumetriset tekstuurit ilmestyivät.

Näyttelijät esittivät roolejaan tummennettujen LED-seinien tai vihreiden taustojen edessä, siristäen himmeitä valoja tai abstrakteja silhuetteja, heidän illuusiot olivat kytkettyjä teknisiin kaavioihin eikä aineellisiin ilmastoisiin, joita he asuisivat elokuvassa. Kuvausten päättymisen jälkeen renderöintifarmit työskentelivät tunteja tai päiviä tuottaakseen korkearesoluutioisia volumetrisia skannauksia, joissa savu kiertelee liikkuvien esineiden ympärillä, tulen hiukkaset reagoivat tuuliin tai maagiset liekit seuraavat sankarin eleitä. Nämä yölliset prosessit aiheuttivat vaarallisia viiveitä palautusilmoitusketjuissa, lukiten luovan valinnan ja jättäen vähän tilaa spontaanisuudelle.

Studiot kuten Disney kehitti LED Stagecraftin The Mandalorianille, yhdistäen live-LED-seinät ennalta käsiteltyihin volumetrisiin simulaatioihin antaakseen vihjeitä immersiivisistä ympäristöistä. Jopa ILMxLABin valmiiden LED-volyymin kammiot perustuivat approksimaatioihin, jotka aiheuttivat ohjaajien epäilevän luovia päätöksiään, kunnes lopulliset komposiitit saapuivat.

Kun reaaliaikaiset volumetriset säteilymarssin demon NVIDIA esitteli GDC:ssä, se ei ollut vain tekninen esittely, vaan paljastus, että volumetriset valaistukset, savut ja hiukkaset voivat elää pelimoottorin näkymässä eikä renderöintifarmien takana. Epicin Unreal Enginen sisäänrakennetut volumetriset pilvi- ja sumujärjestelmät osoittivat, että nämä efektit voivat suoratoistaa elokuvanlaatuisella terävyydellä ilman öisiä renderöintikustannuksia. Yhtäkkiä, kun näyttelijä hengittää ulos ja katsuu, miten höyry kiertyy hänen kasvojensa ympärille, esitys muuttuu. Ohjaajat nipistävät ilmaa, pyytäen tiheämpää sumua tai kirkkaampia hiukkasia, ja palautetta toimitetaan välittömästi. Kuvaajat ja VFX-taiteilijat, jotka aiemmin olivat eri osastojen takana, työskentelevät nyt rinnakkain yhdessä, elävässä kanvaksessa, muokkaamalla valoa ja hiukkasten käyttäytymistä kuin kirjailijat improvisoivat avajaisillan.

Useimmat studiot ovat kuitenkin edelleen kiinni offline-ensin infrastruktuureissa, jotka on suunniteltu maailmaa varten, jossa renderöidään potenssiin ja kehykseen. Miljardit tietopisteet pakkaamattomista volumetrisista kaappausten satelevat tallennusjärjestelmiin, paisuttaen budjetteja ja polttaen sykliä. Laitepullotukset hidastavat luovaa iterointia, kun tiimit odottavat tunteja (tai jopa päiviä) simulaatioiden loppumista. Samaan aikaan pilvilaskut paisuvat, kun teratavut siirtyvät edestakaisin, kustannukset usein tutkitaan liian myöhään tuotannon elinkaaren aikana.

Monissa suhteissa tämä merkitsee eristyneiden hierarkioiden loppua. Reaaliaikaiset moottorit ovat osoittaneet, että raja esityksen ja jälkityön välillä ei ole enää seinä vaan gradientti. Voit nähdä, miten tämä innovaatio reaaliajassa renderöinnissä ja simulaatiossa toimii esityksessä Real-Time Live at SIGGRAPH 2024. Tämä osoittaa, miten reaaliaikaiset moottorit mahdollistavat enemmän interaktiivisia ja välittömiä jälkityön prosesseja. Tiimit, jotka ovat tottuneet luovuttamaan lukittuneen järjestyksen seuraavalle osastolle, työskentelevät nyt yhdessä jaettujen kanvaiden parissa, kuin näytelmässä, jossa sumu virtaa hahmon henkäyksen mukana, ja visuaalinen efekti pulsailee näyttelijän sydämenlyönnin mukana, kaikki koreografiat paikan päällä.

Volumetriset ovat enemmän kuin ilmastoista koristelua; ne muodostavat uuden elokuvakielen. Hieno sumu voi heijastaa hahmon epäilyä, paksuuntuen kriisitilanteissa, kun taas loistavat hiukkaset voivat hajota kuin haipuvat muistot, pulsahtaa aikataulun mukaisesti vaikuttavan sävelen mukana. Microsoftin kokeilut live-volumetrisessa kaappauksessa VR-kerronnalle osoittavat, miten ympäristöt voivat haarautua ja reagoida käyttäjän toimiin, viitatessa siihen, että elokuva voi myös luopua kiinteästä luonteestaan ja tulla vastaavaksi kokemukseksi, jossa maailma itsessään osallistuu kertomukseen.

Jokaisen jumittuneen volumetrisen kohtauksen takana piilee kulttuurinen inerti, joka on yhtä voimakas kuin mikä tahansa tekninen rajoitus. Tiimit, jotka on koulutettu batch-renderöidylle putkistolle, ovat usein epävarmoja muutosta, pitäen kiinni tutuista aikatauluista ja merkkipaaluja ohjaavista hyväksynnöistä. Kuitenkin jokainen päivä, joka vietetään lukittujen työprosessien parissa, on päivä menetettyä luovaa mahdollisuutta. Seuraava sukupolvi kertojia odottaa reaaliaikaisia palautusilmoitusketjuja, viimeisteltyjä näkymien uskottavuutta ja leikkipaikkoja kokeiluille, työkaluja, joita he jo käyttävät pelaamisessa ja interaktiivisessa mediassa.

Studiot, jotka eivät modernisoi, vaarantavat enemmän kuin vain tehokkuuden; he vaarantavat kyvykkyytensä. Jo nyt näemme vaikutuksen, kun nuoret taiteilijat, jotka ovat koulutettu Unityyn, Unreal Enginen ja AI-vahvistettuihin työprosesseihin, pitävät renderöintifarmejä ja noodle-shredding-ohjelmia vanhanaikaisina. Kun Disney+:n menestyksekkäät elokuvat esittelevät LED-volyymin lavasteita, ne, jotka kieltäytyvät sopeutumasta, löytävät, että heidän tarjouksensa jäävät avattuksi. Keskustelu siirtyy ”Voimmeko tehdä tämän?” -kysymyksestä ”Miksi emme tee tätä?” -kysymykseen, ja studiot, jotka vastaavat parhaiten, muokkaavat seuraavien kymmenen vuoden visuaalista kerrontaa.

Tässä maisemassa, jossa on luovaa kaipausta ja teknisiä pullonkauloja, aalto uusia reaaliaikaisia volumetrisia alustoja alkoi muotoilla odotuksia. Ne tarjosivat GPU-kiihdytetyn toistamisen volumetrisille välimuistille, lennossa pakkausalgoritmeja, jotka kutistivat tietojen jalanjäljen useilla kertaluokilla, ja liitännäisiä, jotka integroivat sulavasti olemassa oleviin digitaalisiin sisällönluomistyökaluihin. Ne omaksuivat AI-ohjatut simulaatiot, jotka ennustivat nesteen ja hiukkasten käyttäytymistä, säästäen taiteilijoilta manuaalista avainkehys-työtä. Olennaisesti ne tarjosivat intuitiivisia käyttöliittymiä, jotka käsittelivät volumetrisia efektejä luonnollisena osana taiteellista suunnitteluprosessia eikä erityistä jälkityön tehtävää.

Studiot voivat nyt muokata ilmasto-efektejä yhdessä kerronnan tahtiensa kanssa, säätäen parametreja reaaliajassa ilman, että joutuvat poistumaan leikkaamosta. Samalla verkkotyöskentelytilat ilmestyivät, mahdollistaen hajasijoitettujen tiimien yhteistyön volumetrisissa kohtauksissa kuin jaettujen käsikirjoitusten sivuina. Nämä innovaatiot ovat merkki poistumisesta perinteisistä rajoituksista, hämärtäen rajaa ennen tuotannon, pääkuvausten ja jälkityön välillä.

Vaikka nämä alustat vastasivat välittömiin kipupisteisiin, ne osoittivat myös laajempaa visiota sisällönluomisesta, jossa volumetriset efektit elävät reaaliaikaisissa moottoreissa elokuvanlaatuisella terävyydellä. Edistyneimmät studiot tunnustivat, että reaaliaikaisen volumetrisen käyttöönotto vaati enemmän kuin pelkän ohjelmistopäivityksen: se vaati kulttuurisia muutoksia. He näkevät, että reaaliaikaiset volumetriset edustavat enemmän kuin teknologisen läpimurron; ne merkitsevät elokuvakerronnan uudelleenmäärittelyä.

Kun kuvauspaikan ilmastoista tulee dynaamisia kumppaneita esityksessä, kerronta saa syvyyttä ja nuansseja, joita aiemmin ei ollut saavutettavissa. Luovien tiimien on mahdollista lukita uusia mahdollisuuksia improvisaatioon, yhteistyöhön ja emotionaaliseen resonanssiin, johdatusta elävän volumetrisen kielen kautta, joka reagoi aikomuksiin ja löytöihin. Kuitenkin tämän potentiaalin toteuttaminen vaatii studioton ottamaan vastaan piilevät kustannukset offline-ensimmäisestä menneisyydestään: tietopungit, työprosessien silot ja riski menettää seuraava sukupolvi taiteilijoita.

Eteenpäin johtava polku on kudonta reaaliaikaisia volumetrisia työprosessin käytäntöön, suuntaamalla työkalut, kyvyt ja kulttuuri yhtenäiseen visioon. Se on kutsu uudelleenajattelemaan alaamme, hajottamaan esteitä idean ja kuvan välillä ja omaksumaan aikakauden, jossa jokainen kehys pulsailee mahdollisuuksilla, jotka syntyvät hetkessä, luotu sekä ihmisen luovuuden että reaaliaikaisen teknologian toimesta.