Kako AI i oblak brišu granice u stvaranju filmova i TV-a

Ako se čini da su razgovori o umjetnoj inteligenciji i računalstvu u oblaku ovih dana posvuda, ne samo u rijetkim tehnološkim i investitorskim krugovima, to je istina. I nigdje to nije istinitije nego u zabavnom biznisu, gdje su i kreativne i poslovne klase zabrinute o mogućim implikacijama na zanat koji su godinama usavršavali i uzbuđeni zbog demokratske moći tehnologije.

Na nedavnom filmskom festivalu Sundance razgovarao sam s brojnim režiserima, montažerima i drugima koji koriste novu umjetnu inteligenciju i mogućnosti prijenosa oblaka na kameru transformišući proces proizvodnje filmova i TV-a, te rukovodiocima s Adobeom, koji čini široko korišteni softver za montažu Premiere Pro i drugi alati koji omogućavaju kreativnost.

Ovo je izvanredno vrijeme, brzo se razvija, sa predviđanjima bez daha, pozitivnim i negativnim, ali i nekim sjajnim prilikama da se prepravi način na koji se film i TV (nazovimo ih samo na video) stvaraju više od jednog stoljeća.

Zagrljaj industrije je tek počeo. ComcastCMCSA
, na primjer, upravo primljen tehnički Emmy za korištenje AI za brzo generiranje sportskih video snimaka.

Zvijezde i njihovi predstavnici također primjećuju kako se AI tehnologije pojavljuju čak iu specijalizovanim kutovima industrije.

Na primjer, agencija za talente ACV je potpisao strateško partnerstvo sa Metaphysic, koja pruža alate za „de-aging“ u Evo, Miramax igra zasnovana na grafičkom romanu. Zvijezde Tom Hanks i Robin Wright igrat će likove u jednoj prostoriji kako stare tokom mnogo godina, od svoje davne mladosti nadalje.

Za agenciju je privlačnost takve tehnologije očigledna: njihove najveće zvijezde/klijenti odjednom postaju održivi u više uloga, decenijama duže.

Mogućnosti učvršćenja nove tehnologije

Ali iz dana u dan, mogućnosti se otvaraju za urednike, režisere i druge koji su uključeni u složen zadatak stvaranja projekta zasnovanog na videu. U razgovorima sa nadobudnim autorima čiji indie i dokumentarni projekti ispunjavaju raspored Sundancea, jasno je da vide Premiere Pro kao brzu platformu za saradnju koja omogućava sve širi spektar mogućih kreativnih upotreba, od strane sve većeg spektra mogućih kreatora.

Adobe'sADBE
Meagan Keane, direktor marketinga proizvoda za profesionalni video, nazvala je AI „velikim otvaranjem vrata kada razmišljamo o budućnosti filmskog stvaralaštva. Mislimo da je budućnost za sve.”

Pod tim misli kako umjetna inteligencija može povećati ljudsku kreativnost, umjesto da je zamijeni, kako se neki boje. Alati zasnovani na umjetnoj inteligenciji mogli bi osnažiti kreatore sa skromnim tehničkim vještinama, resursima ili vezama za modno privlačne projekte u videu i drugim medijima. Čak i sada, za profesionalne kreatore, umjetna inteligencija smanjuje potrebu za zadacima koji se ponavljaju, poput prolaska kroz snimak za određenu scenu, omogućavajući urednicima i drugim kreatorima da se usredotoče na (bukvalno) širu sliku.

Ali to je veće od toga, rekao je Michael Cioni, Adobe-ov viši direktor globalnih inovacija i dugogodišnji šampion u tehnologijama od kamere do oblaka s Frame.io u vlasništvu Adobe-a.

Svako digitalno sredstvo je i sredstvo u oblaku

On to jednostavno kaže: „Do 2031. godine, svako elektronsko sredstvo koje se generiše u medijima i zabavi biće generisano u oblaku, u oblaku. To je istina. Ja to nazivam tehnološkom sigurnošću, da će svako elektroničko sredstvo koje generiše uređaj biti generirano u oblaku” umjesto, recimo, na lokalnom tvrdom disku, celuloidu, video traci ili memorijskoj kartici.

U poznatom ciklusu transformacije medija, tekstualni dokumenti su prvi krenuli u oblak (i ​​u AI). Sada se rutinski kreiraju, dijele i preoblikuju na uslugama zasnovanim na oblaku kao što su Google Docs, Apple Pages, Microsoft Word i Adobe-ov Acrobat. Stotine miliona ljudi slušaju (i stvaraju, sarađuju i prodaju) muziku u oblaku, zahvaljujući Spotify, Apple Music, Amazon Music, Tidal i drugima. Sada, to mijenja najsloženije medije koje stvaramo.

„Recimo da snimate filmsku scenu“, rekao je Cioni. „Moći ćete da upišete jezik nakon snimanja scene: 'Neka pada kiša.' I voda će se pojaviti u kadru, počet će kiša. 'Neka padne snijeg' i počet će se pojavljivati ​​na snimku. I ne morate biti inženjer da biste to učinili. To zaista izgleda kao naučna fantastika, ali će postati potpuno izvodljivo. Vidimo da se to dešava u vrlo ranim fazama snimanja (fotografije), i znamo da će to prerasti u video. I to je zaista važan atribut gdje moramo razmišljati o tome kako to utiče na kreativne ljude.”

To ima mnogo implikacija za budućnost stvaranja pokretnih slika. Kako je to davno rekao Leonard Cohen, kako je prešao od pjesnika do romanopisca i pjevača/tekstopisca u svojim tridesetim, „granice između mnogih poduhvata su izblijedjele“.

Mnogi mlađi filmaši rutinski prelaze te granice, radeći pomalo od svega u stvaranju svojih projekata i rutinski sarađujući na digitalnim platformama. Uz isporuku od oblaka do kamere i AI pameti, oni mogu snimiti scenu, brzo generirati grubu "montažu" kao početno mjesto za montažu, dok utvrđuju da li ima dovoljno da scena "radi" ili je potrebno više snimanja .

Oni također mogu grubo napraviti osnovne vizualne efekte, korekciju boja, pa čak i dizajn zvuka prije nego što ga predaju stručnjacima na fino podešavanje. Kao takav, Premiere je postao više od tradicionalnog nelinearnog programa za uređivanje videa za mnoge Sundance kreatore.

Izgradnja novog odnosa između ljudi i slika

"Ovo je jedna od naših najvećih strasti: odnos između ljudi i kamera i kako to utiče na društvo", rekao je Maximilien Van Aertryck, koreditelj (i ko-urednik) provokativnog dokumentarca Fantastic Machine, koji osvojio specijalnu nagradu žirija Sundancea za kreativnu viziju. “Mi smo kao antropolozi koji vole da se zabavljaju.”

Njihov dokumentarac nježno poziva na promišljen pristup svijetu koji stvaramo s ovim novim alatima. Kako je glasio stari politički vic, "kome ćeš vjerovati: meni ili tvojim lažljivim očima?" Sve više moramo da razumemo kada naše oči su treba vjerovati lažima i pokretnim slikama, rekao je Aertryckov ko-reditelj/urednik, Axel Danielson.

„Film nema mnogo odgovora“, rekao je Danielson. “Ima pitanja. Jedini odgovor koji znamo je da mi kao društva zajednički moramo vrlo ozbiljno shvatiti medijsku pismenost.”

Projekat objedinjuje više od jednog veka pokretnih slika, koje sežu do pionira kao što je Georges Melies (čiji bi kraljevski podanik uzviknuo ono što je postalo ime filma). Usput se zaustavlja kod uznemirujuće strastvene Leni Riefenstahl, koja igra svoje omiljene kadrove sa nacističkog mitinga u Nirnbergu, i borca ​​ISIS-a koji više puta kvari svoje replike u kolutu iz video snimka regrutacije terorista. Sadrži i mnogo nježnije dijelove, ali poenta je da će kreatori sjajni i grozni koristiti nove alate na mnogo načina.

On fantastična mašina, Van Aertryck i Danielson proveli su godine prikupljajući prepoznatljive isječke o komplikovanom odnosu između ljudi/kamera i slika koje stvaraju. Kada je došlo vrijeme za sklapanje filma, radili su na daljinu s montažerom Mikelom Cee Karlssonom i izvršnim producentom Rubenom Ostlundom, dva puta nominiranim za Oskara scenaristom i režiserom (Trougao tuge) čija je Plattform Production producirala film.

“Mi nismo obučeni urednici; mi to radimo zato što to moramo da uradimo”, rekao je Van Aertrik. “Adobe postaje savršen alat za nas, jer možemo sve baciti unutra i podijeliti naprijed-nazad.”

Četvorica su koristila Premiereove alate zasnovane na oblaku za razmjenu klipova i sekvenci kao da sjede za stolom, rekao je Van Aertryck, iako su bili rasprostranjeni širom zapadne Evrope od Baltika (Geteborg, Švedska) do Baleara (Majorka). To je posebno širok primjer slobode koju daje kreatorima da dođu s bilo kojeg mjesta i rade bilo gdje, ako im je potrebno ili žele.

„Mogućnost dijeljenja na mreži čini mnogo više mogućim,“ rekao je Crystal Kayiza, scenarista-reditelj Odmori se, koji je osvojio nagradu žirija Sundancea za američki kratki film. “Ako želim da se vratim u Oklahomu, to mogu učiniti ako sam u (kreiranju) kratkog filma.”

Prošle godine, Adobe je najavio nove mogućnosti direktnog prenosa u oblak u nekim popularnim kamerama i drugim proizvodnim uređajima koji istovremeno emituju video dok je snimljen. To omogućava montažerima, producentima, rukovodiocima i drugim stručnjacima za postprodukciju da počnu raditi na snimku već nekoliko minuta nakon snimanja.

Čak i male proizvodnje koriste te tehnologije. Veze u oblaku su bile neophodne, posebno u ranoj fazi stvaranja Idem na Varsity u Mariachi, rekla je Daniela T. Quiroz, koja je osvojila Sundance nagradu za montažu.

Reditelji Alejandra Vasquez i Sam Osborn još su snimali dokumentarni film o srednjoškolskim plesnim takmičenjima u teksaškoj dolini Rio Grande kada je Quiroz iz Bruklina počeo sastavljati projekat. Njen rani i svježi pogled na već snimljeni materijal pomogao je u oblikovanju kasnijih snimanja i područja fokusa.

„Kao urednici, imamo jedinstvenu privilegiju da po prvi put vidimo ove ljude pred kamerom“, rekao je Quiroz. “Stvarno možete vidjeti u koga se zaljubljujete i u koju muziku se zaljubljujete.”

Bez ovih odmah dostupnih digitalnih dnevnih novina, poput „starih dana“ od prije samo nekoliko godina, bilo je neophodno u snimanju Ponekad razmišljam o smrti na lokaciji u udaljenom dijelu obale Oregona. Umjesto toga, snimci svakog dana bili su učitani na čvrste diskove, a zatim preko noći poslani u New Orleans kako bi ih uneli digitalni posrednici. Bio je to podsjetnik na poboljšanja koja je tehnologija donijela, rekao je urednik Ryan Kendrick.

Nova vrsta saradnje

To je omogućilo Kendricku iz Nashvillea da započne montažu, sarađujući s rediteljkom Rachel Lambert i drugima u više država.

„Kako je super što mogu da radim sa kim želim da radim, a nismo vezani za isto mesto“, rekao je Kendrik. Također mijenja dinamiku između reditelja, snimatelja, montažera i ostatka produkcije.

U prošlosti ste se uvijek osjećali izolirano od setova, rekao je Kendrick. „Sada se osjećate povezaniji s tim. Ne osjećate se toliko odvojeno od tona koji stvaraju. Soba za montažu je zaista sjajno mjesto gdje pravite tone grešaka i radite apsolutno suprotno od onoga što želite. Uvijek kažem: 'Ne znam. Hajde da to shvatimo.'”

On Ponekad se osecam kao da umrem, Kendrick, Lambert i direktor fotografije Dustin Lane počeli su razgovarati jednom sedmično mnogo prije nego što je snimanje zapravo počelo, kako bi ranije otklonili potencijalne probleme.

“Razgovarali bismo o problemima uređivanja koji bi se mogli pojaviti,” rekao je Kendrick. “Kada dobijete scenarije, najteže je razmišljati o tome kako će film prijeći u sljedeći dio. Naime, u filmu (protagonisti) idu u kino. Mnogo smo razgovarali o tome kako ćemo dobiti slike koje su nam potrebne da zadržimo emocionalnu težinu.”

Brzi zaokreti mogući sa Camera-to-Cloud posebno su korisni za kratke projekte kao što su reklame i muzički spotovi, rekao je Kendrick.

“Neki zaokreti u reklamama su divlji,” rekao je Kendrick. Mogućnost prosljeđivanja projekata naprijed-nazad u Premiere Pro, Frame.io i After Effects zaista je bila izvediva samo uz arhitekturu zasnovanu na oblaku.

“To je najveće (kašnjenje u proizvodnim procesima) koje je eliminirano u posljednjih pet godina,” rekao je Kendrick.

Vodeći principi izgradnje bolje tehnologije

Adobeov pristup njegovim tehnologijama je izgrađen oko pet „vodećih principa:“ radni tok, mediji, saradnja, produktivnost i sigurnost, rekao je Keane.

“Mi zaista stavljamo AI u 'produktivnost',” rekao je Keane. “Ne radi se o zamjeni kreativaca. Radi se o zamjeni svakodnevnog.”

Holivudski sindikati pomno posmatraju prostor veštačke inteligencije koji se brzo menja. Puck je izvijestio da odbor najvećeg holivudskog sindikata, SAG-AFTRA, planira uključiti pitanje prava na sličnost – korištenje AI za rekreaciju izgleda, glasa ili drugih aspekata svojih članova – u predstojeće pregovaranje o ugovoru.

Za sada, advokati za talente su savjetovani da "bilo koji jezik u ugovoru koji ima za cilj kontrolirati pravo na simulaciju glumačke izvedbe, (je) 'ništav i neprovediv sve dok se uslovi ne pregovaraju sa sindikatom'", izvijestio je Puck .

Složeno novo pitanje moglo bi dovesti do nekih teških pregovora o ugovoru ovog proljeća. Mlađi i sredovečni izvođači koji žele da prošire svoje mogućnosti karijere mogu prihvatiti neke upotrebe tehnologije, ali bez jake zaštite ugovora, neke kuće mogu koristiti tehnologiju kao način da izbegnu plaćanje za digitalne performanse koji tehnički nisu glumci.

Jedan grubi primjer onoga što bi na kraju moglo doći mogao bi se sedmicama pronaći na Twitchu, gdje je “watchmeforever” stvorio beskonačna, AI generisana "epizoda". Seinfeld. „Emisija“ je sadržavala loše naglašene, kompjuterski generisane glasove, jednostavnu grafiku i šale koje nisu bile posebno smiješne. Emisija također sugerira ono što bi eventualno moglo biti moguće na mnogo višem nivou kvaliteta. Vrijedi napomenuti da je beskonačna petlja prekinuta obavještenjem o isključenju kada je rutina ustajanja lika “Jerry” skrenula u ono što se smatralo anti-trans rutinom.

Otvaranje svijeta za kreativne potrage

Što je daleko pozitivnije, Adobe-ov Keane ukazuje na daleko širi pristup kreativnim alatima koje će AI i oblak omogućiti. Eliminiše potrebu za velikim farmama renderovanja za generisanje procesnih slika i zvuka, generisanje efekata i ostalo, dok i dalje pruža računarsku snagu i sigurnost koji su potrebni svakom umereno ambicioznom video projektu.

“Ako možete centralizirati oblak, možete otvoriti mogućnost da priče dolaze iz cijelog svijeta”, rekao je Keane. „Saradnja mora biti u svakoj fazi. Zajednička perspektiva ili jača vaše ideje ili vas dodatno izaziva.”

Kao primjer važnosti sigurnosti za filmske stvaraoce, Keane je naveo Plan C, Sundance dokumentarac o abortusu. Njegovi kreatori morali su da naprave višestruka zamućenja lica i glasova nekih intervjua na kameri, kao i čvrsto obezbeđenje za nezamućene originalne medije.

Eksplozija generativne umjetne inteligencije, dubokih lažnjaka i srodnih problema također znači da je autentičnost važnija nego ikad, rekao je Keane. Adobe je član Inicijative za autentičnost sadržaja, zajedno s drugim medijskim i tehnološkim kompanijama kao što je New York TimesNYT
i Canon.

Keanu Reeves, zvijezda kultne sci-fi franšize The Matrix, manje je sangviničan. Nedavno je rekao za Wired da je jedna zlonamjerna upotreba videa uz pomoć umjetne inteligencije, stvaranje deepfakes, je "strašno". Reevesovi ugovori rutinski uključuju klauzulu koja zabranjuje studijima da digitalno manipulišu njegovim nastupom, odredbu koja datira decenijama unazad do produkcije koja je umetnula virtuelnu suzu na njegovo lice.

"Ono što je frustrirajuće u vezi s tim je da gubite svoju agenciju", rekao je Reeves o invazivnim praksama. “Kada igrate u filmu, znate da ćete biti montirani, ali u tome učestvujete. Ako uđete u deepfake zemlju, ona nema nijednu od vaših tačaka gledišta. To je strašno. Biće zanimljivo vidjeti kako će se ljudi nositi s ovim tehnologijama.”

Sljedeća tehnologija koja mijenja igru

Sljedeća tehnologija guranja ruba, koja je već dostupna u beta verziji na Premiere Pro, je takozvano uređivanje zasnovano na tekstu, koje omogućava osobi da uređuje video uređujući tekst dijaloga koji je ekstrahirao i transkribovao iz videa AI. AI također ističe važne zvučne bilješke, može napraviti početni sklop konačnog projekta i generirati pretraživanja zasnovana na ključnim riječima za brzo pronalaženje određenih klipova ili razgovora. Podaci napravljeni za projekat postaju moćan novi način za efikasno upravljanje svim tim snimcima.

„Hidriraš medije svim ovim bogatim podacima“, rekao je Keane.

Neke manje kompanije već su pokrenule svoja preuzimanja sličnih tehnologija. Opis i podcast može kreirati digitalnu verziju vašeg glasa, a zatim ga dati da čita tekstualne skripte, bez potrebe za dodatnim uređivanjem. Descript je također nedavno dodao tekstualno uređivanje za video, bilo da se radi o podcastovima ili drugom sadržaju.

Urednik Kendrick je rekao da je već koristio Adobe-ove alate za uređivanje teksta kako bi pomogao prijatelju da brzo okrene mini-dokumentarac sa Aljaske. Uređivanje zasnovano na tekstu također će vjerovatno biti izuzetno korisno za takozvane „prediktore“, producente/montažere koji obično moraju prolaziti kroz dane snimljenog materijala kako bi brzo sastavili nenapisane emisije u kratkim vremenskim okvirima, rekao je Kendrick.

Audio knjige, skripte, društveni mediji također dobivaju AI

AI se također nalazi na ivici mnogih drugih kutaka zabave. AppleAAPL
pokrenut paket AI alata dizajniranih za kreiranje naracije za audio knjige, stvarajući još jednu opciju za autore da kreiraju jeftine audio verzije svojih projekata “pripovijedanih digitalnim glasom zasnovanim na ljudskom naratoru”. Vijest je izazvala glasne prigovore elitnog korpusa ljudskih pripovjedača audio knjiga i njihovih brojnih obožavatelja.

Svakako postoji razlog da cijenimo najbolje radove tih ljudskih naratora, a možda će proći mnogo vremena prije nego što se AI alat približi uvjerljivim glasovima i izvedbama najboljih ljudskih čitalaca na najboljim knjigama.

Ali cijena korištenja tog talenta je daleko iznad finansija desetina hiljada knjiga koje se izdaju svake godine. To je mjesto gdje bi Appleov paket alata mogao omogućiti pristup drugom tržištu za one male knjige, autore i izdavače koji pokušavaju doći do prethodno udaljenog tržišta koje je već vrijedno procijenjenih 1.5 milijardi dolara širom svijeta.

Startup Filmustage koristi AI da razbije komponente scenarija, uključujući elemente kao što su glumci, rekviziti, kostimi, korištena vozila, zvukovi, lokacije i još mnogo toga.

A sa strane kratkog, kratkog videa u poslovanju, TikTok, Meta's Reels i Alphabet's YouTube Shorts svi zavise od mašinskog učenja i AI alata kako bi poslužili sljedeći "preporučeni" video za koji misle da ćete htjeti pogledati, i povezivanje oglasa s tim iskustvom na način koji je neprimetniji i privlačniji.

Zvao je analitičar Rich Greenberg iz LightShed Partners prelazak Facebooka na poboljšane preporuke sadržaja vođene umjetnom inteligencijom je izuzetno skup, ali "na kraju bi to moglo dokazati (Meta CEO Mark) Zuckerbergov drugi najimpresivniji stožer (poslije mobilnih) na platformi koja se konstantno razvijala od svog početka."