Kako AI in oblak brišeta meje pri ustvarjanju filmov in TV

Če se zdi, da so pogovori o umetni inteligenci in računalništvu v oblaku dandanes povsod, ne le v redkih tehnoloških in vlagateljskih krogih, je res. In nikjer to ni bolj res kot v zabaviščnem poslu, kjer sta ustvarjalni in poslovni razred zaskrbljena zaradi možnih posledic za obrt, ki so jo brusili leta, in navdušena nad demokratizacijsko močjo tehnologij.

Na nedavnem filmskem festivalu Sundance sem se pogovarjal s številnimi režiserji, montažerji in drugimi, ki uporabljajo novo umetno inteligenco in zmožnosti oblaka v kamero, ki preoblikujejo filmsko in televizijsko produkcijo, ter vodstvenimi delavci z Adobejem, ki omogoča široko uporabljano programsko opremo za montažo Premiere Pro in druga orodja za omogočanje ustvarjalnosti.

To je izjemen čas, ki se hitro razvija, z zadihanimi napovedmi, tako pozitivnimi kot negativnimi, a tudi z nekaj odličnimi priložnostmi za predelavo načina, kako sta film in TV (recimo jima samo videoposnetka) nastala več kot stoletje.

Objem industrije se je šele začel. ComcastCMCSA
, na primer pravkar prejeto tehnični emmy za uporabo umetne inteligence za hitro ustvarjanje športnih videoposnetkov.

Opažajo tudi zvezde in njihovi predstavniki, saj se tehnologije umetne inteligence pojavljajo tudi v specializiranih kotičkih industrije.

Na primer agencija za talente CAA je podpisala strateško partnerstvo z Metaphysic, ki zagotavlja orodja za »odstaritev«. Tu film Miramax, ki temelji na grafičnem romanu. Zvezdnika Tom Hanks in Robin Wright bosta v eni sami sobi igrala lika, ki se starata skozi mnoga leta, od svoje davne mladosti naprej.

Za agencijo je privlačnost takšne tehnologije očitna: njihove največje zvezde/stranke so nenadoma sposobni preživeti v več vlogah, desetletja dlje.

Spodbudne možnosti nove tehnologije

Toda iz dneva v dan se ponujajo možnosti za urednike, režiserje in druge, ki sodelujejo pri zapleteni nalogi ustvarjanja projekta, ki temelji na videu. V pogovorih z nadobudnimi avtorji, katerih neodvisni in dokumentarni projekti polnijo spored Sundancea, je jasno, da vidijo Premiere Pro kot hitro platformo za sodelovanje, ki omogoča vedno širši nabor možnih ustvarjalnih uporab s strani vedno širšega nabora možnih ustvarjalcev.

Adobe'sADBE
Meagan Keane, direktorica produktnega trženja za profesionalni video, je umetno inteligenco označila za »veliko možnost, ki odpira vrata, ko razmišljamo o prihodnosti filmskega ustvarjanja«. Mislimo, da je prihodnost za vse.”

S tem misli, kako lahko umetna inteligenca poveča človeško ustvarjalnost, namesto da jo nadomesti, kot se nekateri bojijo. Orodja, ki jih poganja umetna inteligenca, bi lahko opolnomočila ustvarjalce s skromnimi tehničnimi veščinami ali brez njih, viri ali povezavami z modno privlačnimi projekti v videu in drugih medijih. Celo zdaj za profesionalne ustvarjalce umetna inteligenca zmanjša mletje ponavljajočih se nalog, kot je prebijanje skozi posnetke za določeno sceno, kar omogoča urednikom in drugim ustvarjalcem, da se osredotočijo na (dobesedno) širšo sliko.

Vendar je več kot to, je dejal Michael Cioni, Adobejev višji direktor za globalne inovacije in dolgoletni zagovornik tehnologij iz kamere v oblak s Frame.io, ki je v lasti Adobeja.

Vsako digitalno sredstvo je tudi sredstvo v oblaku

Pove preprosto: »Do leta 2031 bo vsako elektronsko sredstvo, ustvarjeno v medijih in zabavi, ustvarjeno v oblaku, v oblaku. To je resnica. Temu pravim tehnološka gotovost, da bo vsako elektronsko sredstvo, ki ga ustvari naprava, ustvarjeno v oblaku," namesto na, recimo, lokalnem trdem disku, celuloidu, video traku ali pomnilniški kartici.

V znanem ciklu preobrazbe medijev so se besedilni dokumenti prvi usmerili v oblak (in umetno inteligenco). Zdaj se redno ustvarjajo, delijo in preoblikujejo v storitvah v oblaku, kot so Google Dokumenti, Apple Pages, Microsoft Word in Adobejev Acrobat. Na stotine milijonov ljudi posluša (ter ustvarja, sodeluje in prodaja) glasbo v oblaku, zahvaljujoč storitvam Spotify, Apple Music, Amazon Music, Tidal in drugim. Zdaj spreminja najbolj zapletene medije, ki jih ustvarjamo.

"Recimo, da delate filmsko sceno," je rekel Cioni. »Po snemanju prizora boste lahko dejansko vtipkali v jeziku: 'Naj bo dež.' In v kadru se bo pojavila voda, začelo bo deževati. 'Make it snow,' in začelo se bo pojavljati na posnetku. In za to vam ne bo treba biti inženir. To se res zdi znanstvena fantastika, a bo postalo povsem izvedljivo. Vidimo, da se to dogaja v zelo zgodnjih fazah fotografij (fotografij), in vemo, da se bo prelilo v video. In to je res pomemben atribut, kjer moramo razmišljati o tem, kako to vpliva na ustvarjalne ljudi.«

To ima ogromno posledic za prihodnost ustvarjanja gibljivih slik. Kot je davno rekel Leonard Cohen, ko je v svojih 30-ih od pesnika postal romanopisec in pevec/tekstopisec, so »meje med mnogimi prizadevanji zbledele«.

Številni mlajši filmski ustvarjalci redno prestopajo te meje, pri ustvarjanju svojih projektov počnejo vsega po malem in redno sodelujejo na digitalnih platformah. Z dostavo iz oblaka v kamero in pametno tehnologijo umetne inteligence lahko posnamejo prizor, hitro ustvarijo grobo »sestavo« kot izhodišče za urejanje, hkrati pa ugotavljajo, ali je dovolj, da prizor »deluje«, ali je potrebno več snemanja. .

Prav tako lahko grobo obdelajo osnovne vizualne učinke, barvne popravke in celo zvočno zasnovo, preden ga predajo strokovnjakom za natančno nastavitev. Kot tak je Premiere postal več kot tradicionalni nelinearni program za urejanje videa za številne ustvarjalce Sundancea.

Gradnja novega odnosa med ljudmi in podobami

"To je ena naših največjih strasti: odnos med ljudmi in kamerami ter kako vpliva na družbo," je povedal Maximilien Van Aertryck, sorežiser (in sourednik) provokativnega dokumentarca. Fantastičen stroj, Ki je prejel posebno nagrado žirije Sundance za ustvarjalno vizijo. "Smo kot antropologi, ki se radi zabavamo."

Njihov dokumentarec nežno poziva k premišljenemu pristopu do sveta, ki ga ustvarjamo s temi novimi orodji. Kot je pisala stara politična šala, "komu boš verjel: meni ali svojim lažljivim očem?" Vse bolj moramo razumeti, kdaj naše oči so laži in gibljivim slikam je treba verjeti, je dejal Aertryckov sorežiser/urednik Axel Danielson.

"Film nima veliko odgovorov," je dejal Danielson. »Ima vprašanja. Edini odgovor, ki ga poznamo, je, da moramo kot družbe kolektivno medijsko pismenost jemati zelo resno.«

Projekt združuje več kot stoletje gibljivih slik, ki segajo do pionirjev, kot je Georges Melies (čigar kraljevi podanik bi vzkliknil, kar je postalo ime filma). Med potjo se ustavi pri neznosno navdušeni Leni Riefenstahl, ki predvaja svoje najljubše posnetke z nacističnega shoda v Nürnbergu, in borcu ISIS-a, ki vedno znova pokvari svoje besede v blooper kolutu iz videa novačenja teroristov. Vsebuje tudi precej nežnejše elemente, a bistvo je, da bodo ustvarjalci, veliki in grozni, nova orodja izkoristili na veliko načinov.

On Fantastičen stroj, Van Aertryck in Danielson sta leta zbirala značilne posnetke o zapletenem odnosu med ljudmi/kamerami in slikami, ki jih ustvarijo. Ko je prišel čas za sestavljanje filma, so na daljavo sodelovali z montažerjem Mikelom Ceejem Karlssonom in izvršnim producentom Rubenom Ostlundom, dvakratnim za oskarja nominiranim piscem in režiserjem (Trikotnik žalosti), katerega Plattform Produktion je produciral film.

»Nismo usposobljeni uredniki; to počnemo, ker to moramo storiti,« je dejal Van Aertryck. "Adobe postane popolno orodje za nas, saj lahko vse vržemo notri in delimo naprej in nazaj."

Štirje so uporabljali Premierejeva orodja v oblaku za izmenjavo posnetkov in sekvenc, kot bi sedeli za mizo, je dejal Van Aertryck, čeprav so bili razširjeni po vsej zahodni Evropi od Baltika (Göteborg, Švedska) do Balearov (Mallorca). To je še posebej obsežen primer svobode, ki jo daje ustvarjalcem, da pridejo od koder koli in delajo skoraj kjerkoli, če to potrebujejo ali želijo.

»Možnost deljenja v spletu omogoča veliko več,« je rekel Crystal Kayiza, scenaristka in režiserka Postanek za počitek, ki je prejel nagrado žirije Sundance za ameriški kratki film. "Če se želim vrniti v Oklahomo, lahko to storim, če sodelujem pri (ustvarjanju) kratkega."

Lansko leto je Adobe napovedal nove zmogljivosti neposrednega prenosa v oblak v nekaterih priljubljenih kamerah in drugih produkcijskih napravah, ki hkrati prenašajo videoposnetek, ko je zajet. To omogoča urednikom, producentom, vodilnim delavcem in drugim strokovnjakom za postprodukcijo, da začnejo delati na posnetku že nekaj minut po tem, ko so bili posneti.

Tudi majhne produkcije uporabljajo tehnologije. Povezave v oblaku so bile bistvenega pomena, zlasti na začetku ustvarjanja Grem na Univerzo v Mariachiju, je povedala Daniela T. Quiroz, ki je prejela nagrado za montažo na Sundanceu.

Režiserja Alejandra Vasquez in Sam Osborn sta še snemala dokumentarec o srednješolskih plesnih tekmovanjih v dolini Rio Grande v Teksasu, ko je Quiroz iz Brooklyna začel sestavljati projekt. Njen zgodnji in svež pogled na že zajeto gradivo je pomagal oblikovati poznejše snemanje in področja, na katera se je osredotočila.

"Kot uredniki imamo ta edinstven privilegij, da te ljudi prvič vidimo pred kamero," je dejal Quiroz. "Resnično vidiš, v koga se zaljubiš in v katero glasbo se zaljubiš."

Brez tistih takoj dostopnih digitalnih dnevnikov, kot so bili »stari časi« pred nekaj leti, je bilo pri snemanju nujno Včasih razmišljam o smrti na lokaciji v oddaljenem delu obale Oregona. Namesto tega so bili posnetki vsakega dne naloženi na trde diske, nato pa čez noč odposlani v New Orleans, kjer so jih posredovali digitalnim posrednikom. To je bil opomin na izboljšave, ki jih je prinesla tehnologija, je dejal urednik Ryan Kendrick.

Nova vrsta sodelovanja

To je Kendricku iz Nashvilla omogočilo, da je začel z montažo in sodeloval z režiserko Rachel Lambert in drugimi v več državah.

"Kako kul je, da lahko delam s tistimi, s katerimi želim delati, in nismo vezani na isto mesto," je dejal Kendrick. Spreminja tudi dinamiko med režiserji, snemalci, montažerji in ostalo produkcijo.

"V preteklosti si se vedno počutil izoliranega od setov," je rekel Kendrick. »Zdaj se počutiš bolj povezanega s tem. Ne počutiš se tako ločenega od tona, ki ga oddajajo. Soba za urejanje je res odličen kraj, kjer naredite ogromno napak in naredite popolnoma nasprotno od tega, kar želite. Vedno rečem: 'Ne vem. Ugotovimo.'«

On Včasih se počutim kot bi umrl, Kendrick, Lambert in direktor fotografije Dustin Lane so se začeli tedensko pogovarjati veliko preden se je snemanje dejansko začelo, da bi čim prej preprečili morebitne težave.

"Pogovarjali bi se o težavah pri urejanju, ki bi se lahko pojavile," je dejal Kendrick. »Ko dobiš scenarije, je najtežje razmišljati o tem, kako bo film prešel v naslednji del. Natančneje, v filmu gredo (protagonisti) v kino. Veliko sva se pogovarjala o tem, kako bova dobila slike, ki jih potrebujeva, da ohraniva čustveno težo.”

Kendrick je dejal, da so hitri preobrati, ki jih omogoča Camera-to-Cloud, še posebej uporabni za kratke projekte, kot so reklame in glasbeni videi.

"Nekateri preobrati v reklamah so divji," je dejal Kendrick. Možnost posredovanja projektov naprej in nazaj v programih Premiere Pro, Frame.io in After Effects je bila res izvedljiva le z arhitekturo v oblaku.

»To je največja (zamuda v delovnih tokovih proizvodnje), ki je bila odpravljena v zadnjih petih letih,« je dejal Kendrick.

Vodilna načela gradnje boljše tehnologije

Keane je dejal, da Adobejev pristop do svojih tehnologij temelji na petih "vodilnih načelih": potek dela, mediji, sodelovanje, produktivnost in varnost.

»Umetno inteligenco resnično vključimo v 'produktivnost',« je dejal Keane. »Ne gre za zamenjavo kreativcev. Gre za zamenjavo vsakdanjega.”

Hollywoodski sindikati pozorno spremljajo hitro spreminjajoče se področje umetne inteligence. Puck je poročal, da upravni odbor največjega hollywoodskega sindikata SAG-AFTRA načrtuje vključitev vprašanja pravic do podobnosti – z uporabo umetne inteligence za poustvarjanje videza, glasu ali drugih vidikov svojih članov – v prihodnja pogodbena pogajanja.

Zaenkrat je bilo odvetnikom za talente opozorjeno, da je "kakršen koli jezik v pogodbi, ki domnevno nadzoruje pravico do simulacije nastopa igralcev," ničen in neizvršljiv, dokler o pogojih ni dogovorjeno s sindikatom, "je poročal Puck .

Zapleteno novo vprašanje bi to pomlad lahko povzročilo težka pogodbena pogajanja. Mlajši in srednjih let izvajalci, ki želijo razširiti svoje karierne priložnosti, lahko sprejmejo nekatere načine uporabe tehnologije, vendar brez močne pogodbene zaščite lahko nekatere prodajalne uporabijo tehnologijo kot način, da se izognejo plačilu za digitalne predstave, ki tehnično niso igralci.

En surov primer tega, kar bi se na koncu lahko zgodilo, je bilo več tednov mogoče najti na Twitchu, kjer je »watchmeforever« ustvaril neskončna »epizoda«, ki jo je ustvarila umetna inteligenca Seinfeld. "Oddaja" je vsebovala slabo nagnjene, računalniško ustvarjene glasove, preprosto grafiko in šale, ki niso bile posebej smešne. Oddaja tudi nakazuje, kaj bi lahko bilo sčasoma mogoče na veliko višji kakovostni ravni. Treba je omeniti, da je bila neskončna zanka prekinjena z obvestilom o zaustavitvi, ko je rutina vstajanja lika »Jerryja« zavila v rutino, ki je veljala za anti-trans rutino.

Odpiranje sveta ustvarjalnemu iskanju

Kar je veliko bolj pozitivno, Keane iz družbe Adobe opozarja na veliko širši dostop do ustvarjalnih orodij, ki jih bosta poganjala umetna inteligenca in oblak. Odpravlja potrebo po velikih farmah upodabljanja za ustvarjanje procesnih slik in zvoka, ustvarjanje učinkov in ostalo, hkrati pa še vedno zagotavlja računalniško moč in varnost, ki ju potrebuje vsak zmerno ambiciozen video projekt.

"Če lahko centralizirate oblak, lahko odprete možnost, da prihajajo zgodbe z vsega sveta," je dejal Keane. »Sodelovanje mora biti na vseh stopnjah. Skupna perspektiva bodisi okrepi vaše ideje ali pa vas dodatno izzove.«

Kot primer pomena varnosti za filmske ustvarjalce je Keane izpostavil Načrt C, dokumentarni film Sundance o splavu. Njegovi ustvarjalci so morali narediti več zameglitev obrazov in glasov nekaterih intervjujev pred kamero ter železno varnost tudi za nezamegljene izvirne medije.

Eksplozija generativne umetne inteligence, globokih ponaredkov in s tem povezanih vprašanj tudi pomeni, da je pristnost pomembnejša kot kdaj koli prej, je dejal Keane. Adobe je član pobude Content Authenticity Initiative, poleg drugih medijskih in tehnoloških podjetij, kot je New York TimesNYT
in Canon.

Keanu Reeves, zvezda ikonične znanstvenofantastične franšize The Matrix, je manj optimističen. Pred kratkim je za Wired povedal, da ena zlonamerna uporaba videa s pomočjo umetne inteligence ustvarja deepfakes, je "strašljiv". Reevesove pogodbe redno vključujejo klavzulo, ki studiem prepoveduje digitalno manipuliranje z njegovim nastopom, določba, ki sega desetletja nazaj v produkcijo, ki je na njegov obraz vnesla navidezno solzo.

"Pri tem je frustrirajoče to, da izgubite agencijo," je o invazivnih praksah dejal Reeves. »Ko igraš v filmu, veš, da te bodo montirali, a pri tem sodeluješ. Če greš v globoko ponarejeno deželo, nima nobenega tvojega stališča. To je strašljivo. Zanimivo bo videti, kako se ljudje spopadamo s temi tehnologijami.«

Naslednja tehnologija, ki bo spremenila igre

Naslednja napredna tehnologija, ki je že na voljo v različici beta za Premiere Pro, je tako imenovano urejanje na podlagi besedila, ki osebi omogoča urejanje videa z urejanjem besedila dialoga, ki ga iz videoposnetka ekstrahira in prepiše AI. Umetna inteligenca tudi poudari pomembne zvočne utrinke, lahko sestavi začetni sklop končnega projekta in ustvari iskanja na podlagi ključnih besed za hitro iskanje določenih posnetkov ali pogovorov. Podatki, zgrajeni za projekt, postanejo zmogljiv nov način za učinkovito upravljanje vseh teh posnetkov.

"Z vsemi temi bogatimi podatki hidrirate medije," je dejal Keane.

Nekatera manjša podjetja so že predstavila podobne tehnologije. Opis in podcast lahko ustvari digitalno različico vašega glasu, nato pa prebere besedilne skripte, ne da bi bilo potrebno dodatno urejanje. Descript je prav tako nedavno dodal besedilno urejanje za videoposnetke, ne glede na to, ali gre za poddaje ali drugo vsebino.

Urednik Kendrick je povedal, da je že uporabil Adobova orodja za urejanje besedila, da bi prijatelju pomagal hitro obrniti minidokumentarec iz Aljaske. Urejanje na podlagi besedila bo verjetno izjemno uporabno tudi za tako imenovane »preditorje«, producente/montažerje, ki se običajno morajo prebijati skozi več dni posnetkov, da hitro sestavijo nenapisane oddaje v tesnih časovnih okvirih, je dejal Kendrick.

Zvočne knjige, skripte, družbeni mediji pridobivajo tudi AI

AI prodira tudi v številne druge kotičke zabave. AppleAAPL
začela nabor orodij AI, zasnovanih za ustvarjanje pripovedi za zvočne knjige, ki ustvarja še eno možnost za avtorje, da ustvarijo poceni zvočne različice svojih projektov, »pripovedovanih z digitalnim glasom, ki temelji na človeškem pripovedovalcu«. Novica je sprožila glasno nasprotovanje elitnega zbora človeških pripovedovalcev zvočnih knjig in njihovih številnih oboževalcev.

Vsekakor obstaja razlog, da cenimo najboljša dela teh človeških pripovedovalcev in morda bo minilo veliko časa, preden se bo orodje AI lahko približalo prepričljivim glasovom in nastopom najboljših človeških bralcev najboljših knjig.

Toda stroški uporabe tega talenta daleč presegajo finance več deset tisoč knjig, izdanih vsako leto. Tam bi lahko Applov nabor orodij zagotovil dostop do drugega trga za tiste majhne knjige, avtorje in založnike, ki poskušajo doseči prej oddaljeni trg, ki je že vreden približno 1.5 milijarde dolarjev po vsem svetu.

Zagon Filmustage uporablja AI za razčlenitev komponent scenarija, vključno z elementi, kot so igralska zasedba, rekviziti, kostumi, uporabljena vozila, zvoki, lokacije in drugo.

In na strani posla s kratkimi, kratkimi videoposnetki so TikTok, Meta's Reels in Alphabet's YouTube Shorts vsi odvisni od strojnega učenja in orodij umetne inteligence za prikaz naslednjega »priporočenega« videa, za katerega mislijo, da si ga boste želeli ogledati, in povezovanje oglasov s to izkušnjo na način, ki je bolj brezšiven in privlačen.

Klical je analitik Rich Greenberg iz LightShed Partners prehod Facebooka na izboljšana priporočila vsebin, ki temeljijo na umetni inteligenci, je izjemno drag, toda "navsezadnje bi se lahko izkazalo (izvršni direktor Mete Mark) Zuckerbergov drugi najbolj impresiven osi (po mobilnih napravah) na platformi, ki se je nenehno razvijala od svojega začetka."

Vir: https://www.forbes.com/sites/dbloom/2023/02/24/how-ai-and-the-cloud-are-erasing-the-borders-in-making-movies-and-tv- oddaje/