Cum AI și Cloud-ul șterg granițele în realizarea de filme și TV

Dacă se pare că conversațiile despre inteligența artificială și cloud computing sunt peste tot în zilele noastre, nu doar în cercurile de tehnologie și investitori rare, este adevărat. Și nicăieri acest lucru nu este mai adevărat decât în ​​domeniul divertismentului, unde clasele creative și business sunt atât preocupate de posibilele implicații pentru meșteșugurile pe care le-au perfecționat de ani de zile, cât și entuziasmate de puterea de democratizare a tehnologiilor.

La recentul festival de film de la Sundance, am discutat cu numeroși regizori, editori și alții care folosesc noile capacități AI și cloud-to-camera care transformă procesul de producție a filmelor și TV, și cu directori cu Adobe, care face software-ul de editare utilizat pe scară largă Premiere Pro și alte instrumente care să permită creativitatea.

Este o perioadă remarcabilă, în evoluție rapidă, cu previziuni fără suflare atât pozitive, cât și negative, dar și niște oportunități grozave de a reface felul în care filmul și televiziunea (să le spunem doar video) au fost făcute de mai bine de un secol.

Îmbrățișarea industriei abia a început. ComcastCMCSA
, de exemplu, tocmai a primit un Emmy tehnic pentru utilizarea AI pentru a genera rapid momente importante din videoclipuri sportive.

Vedetele și reprezentanții lor remarcă și ele, deoarece tehnologiile AI apar chiar și în colțurile specializate ale industriei.

De exemplu, o agenție de talent CAA a semnat un parteneriat strategic cu Metaphysic, care oferă instrumente de „de-îmbătrânire” în Aici, o caracteristică Miramax bazată pe un roman grafic. Vedetele Tom Hanks și Robin Wright vor interpreta personaje într-o singură cameră pe măsură ce îmbătrânesc de-a lungul multor ani, de la tinerețea lor de mult timp înainte.

Pentru o agenție, atractia unei astfel de tehnologii este evidentă: cele mai mari vedete/clienți ai lor sunt dintr-o dată viabile în mai multe roluri, pentru mai multe decenii.

Posibilitățile de întărire ale noii tehnologii

Dar zi de zi, posibilitățile sunt încurajatoare pentru editori, regizori și alții implicați în sarcina complexă de a crea un proiect bazat pe video. În conversațiile cu autorii în devenire ale căror proiecte indie și documentare umplu programul Sundance, este clar că ei văd Premiere Pro ca pe o platformă de colaborare de mare viteză care permite o gamă din ce în ce mai largă de posibile utilizări creative, de către o gamă tot mai largă de posibili creatori.

AdobeADBE
Meagan Keane, director de marketing de produse pentru video pro, a numit AI „un uriaș deschidere a posibilităților atunci când ne gândim la viitorul filmului. Credem că viitorul este pentru toată lumea.”

Prin asta, ea vrea să spună cum poate AI să sporească creativitatea umană, mai degrabă decât să o înlocuiască, așa cum se tem unii. Instrumentele alimentate cu inteligența artificială le-ar putea oferi creatorilor cu abilități tehnice, resurse sau conexiuni modeste sau inexistente la proiecte captivante de modă în videoclipuri și alte media. Chiar și acum, pentru creatorii profesioniști, inteligența artificială reduce sarcina de sarcini repetitive, cum ar fi trecerea prin filmări pentru o anumită scenă, permițând editorilor și altor creatori să se concentreze asupra imaginii (literalmente) mai mari.

Dar este mai mare decât atât, a spus Michael Cioni, director senior al Adobe pentru inovare globală și un campion de lungă durată al tehnologiilor camera-to-cloud cu Frame.io, deținut de Adobe.

Fiecare activ digital, un activ în cloud

El o spune simplu: „Până în anul 2031, fiecare activ electronic care este generat în media și divertisment va fi generat în cloud, de către cloud. Acesta este adevarul. Eu numesc asta o certitudine tehnologică, că fiecare activ electronic care este generat de un dispozitiv va fi generat în cloud” în loc de, să zicem, pe un hard disk local, celuloid, casetă video sau card de memorie.

Într-un ciclu familiar de transformare a media, documentele text au fost primele care s-au îndreptat către cloud (și către AI). Acum sunt create, partajate și remodelate în mod obișnuit pe servicii bazate pe cloud, cum ar fi Google Docs, Apple Pages, Microsoft Word și Adobe Acrobat. Sute de milioane de oameni ascultă (și creează, colaborează și vând) muzică pe cloud, datorită Spotify, Apple Music, Amazon Music, Tidal și altele. Acum, schimbă cele mai complexe medii pe care le creăm.

„Să presupunem că faci o scenă de film”, a spus Cioni. „Veți putea să tastați în limbaj, după ce ați filmat o scenă: „Fă să plouă”. Și apă va apărea în fotografie, va începe să plouă. „Fă să ningă” și va începe să apară în fotografie. Și nu va trebui să fii inginer pentru a face asta. Pare într-adevăr SF, dar va deveni total fezabil. Vedem că se întâmplă în primele etape ale foto (fotografii) și știm că se va transforma în cascadă în videoclip. Și acesta este un atribut cu adevărat important în cazul în care trebuie să ne gândim la modul în care acest lucru îi afectează pe oamenii creativi.”

Acest lucru are o mulțime de implicații pentru viitorul realizării de imagini în mișcare. După cum a spus Leonard Cohen cu mult timp în urmă, când a trecut de la poet la romancier și cântăreț/compozitor la 30 de ani, „granițele dintre o mulțime de eforturi s-au estompat”.

Mulți cineaști mai tineri trec în mod obișnuit aceste granițe, făcând puțin din toate în realizarea proiectelor lor și colaborând în mod obișnuit pe platformele digitale. Cu livrarea cloud-to-camera și inteligența AI, aceștia pot filma o scenă, pot genera rapid un „ansamblu” brut ca loc de plecare pentru o editare, determinând în același timp dacă există suficient pentru ca scena să „funcționeze” sau este nevoie de mai multe filmări. .

De asemenea, ei pot aplica efecte vizuale de bază, corectarea culorilor și chiar designul sunetului înainte de a le preda specialiștilor pentru reglare fină. Ca atare, Premiere a devenit mai mult decât un program tradițional de editare video neliniar pentru mulți creatori Sundance.

Construirea unei noi relații între oameni și imagini

„Aceasta este una dintre cele mai mari pasiuni ale noastre: relația dintre oameni și camere și modul în care aceasta afectează societatea”, a spus Maximilien Van Aertryck, co-director (și co-editor) al documentarului provocator. Mașină fantastică, Care a câștigat un premiu special al juriului Sundance pentru viziune creativă. „Suntem ca antropologii cărora le place să se distreze.”

Documentarul lor solicită cu blândețe o abordare atentă a lumii pe care o creăm cu aceste noi instrumente. După cum spunea vechea glumă politică, „pe cine vei crede: pe mine sau ochii tăi mincinoși?” Din ce în ce mai mult, trebuie să înțelegem când ochii noștri sunt minciuna si imaginile in miscare trebuie crezute, a spus co-directorul/-editorul Aertryck, Axel Danielson.

„Filmul nu are multe răspunsuri”, a spus Danielson. „Are întrebări. Singurul răspuns pe care îl cunoaștem este că noi, ca societăți, trebuie să luăm în mod colectiv alfabetizarea media foarte în serios.”

Proiectul adună mai mult de un secol de imagini în mișcare, revenind la pionieri precum Georges Melies (al cărui subiect regal ar exclama ceea ce a devenit numele filmului). Pe parcurs, se oprește la o Leni Riefenstahl extrem de avidă, care face play-by-play cu fotografiile ei preferate de la un miting nazist de la Nürnberg și un luptător ISIS care își strica repetat replicile într-o bobină de blooper dintr-un videoclip de recrutare teroristă. Are și elemente mult mai blânde, dar ideea este că creatorii grozavi și groaznici vor folosi instrumente noi în multe feluri.

On Mașină fantastică, Van Aertryck și Danielson au petrecut ani de zile colecționând clipuri distinctive despre relația complicată dintre oameni/camere și imaginile pe care le creează. Odată ce a venit timpul să monteze filmul, au lucrat de la distanță cu editorul Mikel Cee Karlsson și producătorul executiv Ruben Ostlund, scenariul și regizorul de două ori nominalizat la Oscar (Triunghiul tristeții) a cărui platformă Produktion a produs filmul.

„Nu suntem editori pregătiți; facem asta pentru că trebuie să facem asta”, a spus Van Aertryck. „Adobe devine instrumentul perfect pentru noi, pentru că putem să aruncăm totul acolo și să le împărtășim înainte și înapoi.”

Cei patru au folosit instrumentele bazate pe cloud ale Premiere pentru a face schimb de clipuri și secvențe ca și cum ar fi stat în jurul unei mese, a spus Van Aertryck, deși erau răspândite în Europa de Vest, de la Marea Baltică (Göteborg, Suedia) la Baleare (Mallorca). Acesta este un exemplu deosebit de îndepărtat al libertății pe care o oferă creatorilor de a veni de oriunde și de a lucra aproape oriunde, dacă au nevoie sau doresc.

„Potând partaja online face mult mai posibil”, a spus Crystal Kayiza, scriitor-regizor al Pauză de odihnă, care a câștigat un premiu al juriului Sundance pentru ficțiune de scurtmetraj din SUA. „Dacă vreau să mă întorc în Oklahoma, pot să fac asta dacă sunt în (crearea) unui scurtmetraj.”

Anul trecut, Adobe a anunțat noi capabilități direct-to-cloud în unele camere populare și alte dispozitive de producție care transmite simultan videoclipul pe măsură ce este capturat. Acest lucru le permite editorilor, producătorilor, directorilor și altor specialiști în post-producție să înceapă să lucreze la filmare imediat după câteva minute după ce a fost filmat.

Chiar și producțiile mici folosesc tehnologiile. Conexiunile la cloud au fost esențiale, mai ales la început, în realizarea Going Varsity in Mariachi, a spus Daniela T. Quiroz, care a câștigat un premiu de montaj Sundance.

Regizorii Alejandra Vasquez și Sam Osborn încă filmau documentarul despre concursurile de dans din liceu din Texas Rio Grande Valley, când Quiroz, din Brooklyn, a început să pună cap la cap proiectul. Viziunea ei timpurie și proaspătă asupra materialului deja capturat a ajutat la modelarea filmărilor ulterioare și a zonelor de focalizare.

„În calitate de editori, avem acest privilegiu unic de a-i vedea pe acești oameni în fața camerei pentru prima dată”, a spus Quiroz. „Puți să vezi cu adevărat de cine te îndrăgostești și de ce muzică te îndrăgostești.”

A face fără acele cotidiene digitale imediat accesibile, cum ar fi „vechile” de acum câțiva ani, a fost o necesitate în filmări. Uneori mă gândesc la moarte pe locație într-o parte îndepărtată a coastei Oregonului. În schimb, filmările din fiecare zi au fost încărcate pe hard disk, apoi expediate peste noapte la New Orleans pentru a fi introduse în intermediari digitali. A fost o amintire a îmbunătățirilor aduse de tehnologie, a spus editorul Ryan Kendrick.

Un nou tip de colaborare

Acest lucru i-a permis lui Kendrick, din Nashville, să înceapă editarea, colaborând cu regizoarea Rachel Lambert și alții din mai multe state.

„Ce tare este că pot lucra cu cine vreau să lucrez și nu suntem legați de același loc”, a spus Kendrick. De asemenea, schimbă dinamica dintre regizori, directori de imagine, editori și restul producției.

„Te-ai simțit întotdeauna izolat de platouri” în trecut, a spus Kendrick. „Acum, te simți mai conectat la asta. Nu te simți atât de separat de tonul pe care îl fac. Sala de editare este un loc grozav pentru a face o mulțime de greșeli și a face exact opusul a ceea ce doriți să faceți. Întotdeauna spun: „Nu știu. Să ne dăm seama.'”

On Uneori îmi vine să mor, Kendrick, Lambert și Directorul de Fotografie Dustin Lane au început să discute săptămânal cu mult înainte de începerea efectivă a filmărilor, pentru a evita eventualele probleme devreme.

„Am vorbi despre problemele de editare care ar putea apărea”, a spus Kendrick. „Când primești scenariile, cel mai greu lucru la care să te gândești este modul în care filmul va trece la următoarea parte. Mai exact, în film, (protagoniștii) merg la film. Am vorbit mult despre cum urma să obținem imaginile de care aveam nevoie pentru a păstra greutatea emoțională.”

Transformările rapide posibile cu Camera-to-Cloud sunt deosebit de utile pentru proiecte scurte, cum ar fi reclame și videoclipuri muzicale, a spus Kendrick.

„Unele din reclame sunt sălbatice”, a spus Kendrick. Posibilitatea de a transmite proiecte înainte și înapoi în Premiere Pro, Frame.io și After Effects a fost într-adevăr posibilă doar cu o arhitectură bazată pe cloud.

„Este cea mai mare (întârziere în fluxurile de producție) care a fost eliminată în ultimii cinci ani”, a spus Kendrick.

Principiile directoare ale construirii unei tehnologii mai bune

Abordarea Adobe față de tehnologiile sale este construită în jurul a cinci „principii directoare”: flux de lucru, media, colaborare, productivitate și securitate, a spus Keane.

„Într-adevăr punem AI în „productivitate”,” a spus Keane. „Nu este vorba despre înlocuirea reclamelor. Este vorba despre înlocuirea mondenului.”

Sindicatele de la Hollywood urmăresc îndeaproape spațiul AI care se schimbă rapid. Puck a raportat că consiliul de conducere al celui mai mare sindicat de la Hollywood, SAG-AFTRA, intenționează să includă problema drepturilor de asemănare – folosind AI pentru a recrea aspectul, vocea sau alte aspecte ale membrilor săi – în viitoarele negocieri contractuale.

Deocamdată, avocații talentelor au fost informați că „orice limbă dintr-un contract care pretinde să controleze dreptul de a simula interpretarea unui actor, (este) „nulă și inaplicabilă până când termenii au fost negociați cu sindicatul”, a raportat Puck. .

Noua problemă complexă ar putea duce la negocieri grele de contract în această primăvară. Interpreții tineri și de vârstă mijlocie care doresc să-și extindă oportunitățile de carieră pot îmbrățișa anumite utilizări ale tehnologiei, dar fără protecții contractuale puternice, unele puncte de vânzare ar putea folosi tehnologia ca o modalitate de a evita să plătească pentru spectacole digitale care nu sunt actorii din punct de vedere tehnic.

Un exemplu grosolan a ceea ce ar putea veni în cele din urmă ar putea fi găsit timp de săptămâni pe Twitch, unde „watchmeforever” a creat un „episod” nesfârșit, generat de AI de Seinfeld. „Show-ul” prezenta voci slab flexionate, generate de computer, grafică simplă și glume care nu erau deosebit de amuzante. Spectacolul sugerează, de asemenea, ceea ce ar putea fi posibil în cele din urmă la un nivel de calitate mult mai ridicat. Merită remarcat că bucla nesfârșită a fost întreruptă cu o notificare de închidere atunci când rutina de stand-up a personajului „Jerry” a virat în ceea ce a fost considerat o rutină anti-trans.

Deschiderea lumii către activități creative

Într-o notă mult mai pozitivă, Keane de la Adobe indică accesul mult mai larg la instrumentele creative pe care AI și cloud-ul le vor ajuta. Elimină necesitatea fermelor de randare mari pentru a genera imagini de proces și sunet, pentru a genera efecte și restul, oferind în același timp puterea de calcul și securitatea de care are nevoie orice proiect video moderat ambițios.

„Dacă poți centraliza cloud-ul, poți deschide posibilitatea de a avea povești care vin din toată lumea”, a spus Keane. „Colaborarea trebuie să fie în fiecare etapă. Perspectiva comună fie îți întărește ideile, fie te provoacă în continuare.”

Ca un exemplu al importanței securității pentru regizori, a subliniat Keane Planul C, un documentar Sundance despre avort. Creatorii săi trebuiau să facă mai multe estompări ale fețelor și vocilor unor interviuri de pe camera de filmat, precum și o securitate ireproșabilă și pentru media originală neîncețoșată.

Explozia IA generativă, falsurile profunde și problemele conexe înseamnă, de asemenea, că autenticitatea este mai importantă ca niciodată, a spus Keane. Adobe este membru al Content Authenticity Initiative, alături de alte companii media și de tehnologie, cum ar fi New York TimesNYT
și Canon.

Keanu Reeves, vedeta emblematicei francize SF Matrix, este mai puțin sangvin. El a spus recent Wired că o utilizare rău intenționată a videoclipurilor asistate de AI, creând deepfakes, este „înfricoșător”. Contractele lui Reeves includ în mod obișnuit o clauză care interzice studiourilor să-și manipuleze digital interpretarea, o prevedere care datează de zeci de ani de la o producție care i-a introdus o lacrimă virtuală pe față.

„Ceea ce este frustrant este că îți pierzi agenția”, a spus Reeves despre practicile invazive. „Când dai un spectacol într-un film, știi că vei fi montat, dar participi la asta. Dacă intri în pământ fals, nu are niciunul dintre punctele tale de vedere. Asta e înfricoșător. Va fi interesant să vedem cum se confruntă oamenii cu aceste tehnologii.”

Următoarea tehnologie care schimbă jocul

Următoarea tehnologie edge-pusshing, deja disponibilă în versiune beta pe Premiere Pro, este așa-numita editare bazată pe text, care permite unei persoane să editeze un videoclip prin editarea textului dialogului extras și transcris din videoclip de către AI. AI evidențiază, de asemenea, sunet importante, poate construi un ansamblu inițial al proiectului final și poate genera căutări bazate pe cuvinte cheie pentru a găsi rapid clipuri sau conversații specifice. Datele construite pentru proiect devin un nou mod puternic de a gestiona eficient toate aceste filmări.

„Hidratezi mass-media cu toate aceste date bogate”, a spus Keane.

Unele companii mai mici și-au lansat deja ideile pe tehnologii similare. Descriere și podcast puteți crea o versiune digitală a vocii dvs., apoi puneți-o să citească scripturi bazate pe text, fără a fi nevoie de mai multe editări. Descript a adăugat recent și editarea bazată pe text pentru videoclipuri, fie că este vorba de podcasturi sau alt conținut.

Editorul Kendrick a spus că a folosit deja instrumentele de editare bazate pe text de la Adobe pentru a ajuta un prieten să întoarcă rapid un mini-documentar cu sediul în Alaska. Editarea bazată pe text este, de asemenea, probabil să fie extrem de utilă pentru așa-numiții „preditori”, producători/editori care, de obicei, trebuie să treacă prin zile de filmare pentru a asambla rapid spectacole fără scenariu pe cronologie strânse, a spus Kendrick.

Cărți audio, scripturi, rețele de socializare Obținând și AI

Inteligența artificială se extinde și în multe alte colțuri ale divertismentului. MărAAPL
a lansat o suită de instrumente AI concepute pentru a crea narațiuni pentru cărți audio, creând o altă opțiune pentru autori pentru a crea versiuni audio la preț redus ale proiectelor lor „povestite prin voce digitală bazată pe un narator uman”. Știrea a declanșat obiecții puternice din partea corpului de elită al naratorilor umani de cărți audio și a numeroșilor lor fani.

Există cu siguranță motive pentru a prețui cea mai bună lucrare a acelor naratori umani și poate trece mult timp până când un instrument AI se poate apropia de vocile și performanțele convingătoare ale celor mai buni cititori umani în cele mai bune cărți.

Dar costul utilizării acestui talent depășește cu mult finanțele a zeci de mii de cărți lansate în fiecare an. Acolo este locul în care suita de instrumente Apple ar putea oferi acces la o altă piață pentru acele cărți, autori și editori de scurtă durată care încearcă să ajungă pe o piață anterior îndepărtată, în valoare de aproximativ 1.5 miliarde de dolari în întreaga lume.

Startup Filmostage folosește AI pentru a descompune componentele scenariului, inclusiv elemente precum distribuția, recuzita, costumele, vehiculele folosite, sunete, locații și multe altele.

Și în ceea ce privește partea video scurtă și scurtă a afacerii, TikTok, Meta's Reels și Alphabet's Shorts pe YouTube depind toate de instrumentele de învățare automată și AI pentru a oferi următorul videoclip „recomandat” pe care cred că veți dori să îl vizionați și conectarea reclamelor la acea experiență într-un mod care este mai fluid și mai captivant.

A sunat analistul Rich Greenberg de la LightShed Partners trecerea Facebook la recomandări îmbunătățite de conținut bazate pe inteligență artificială extrem de costisitoare, dar „în cele din urmă s-ar putea dovedi (directorul Meta CEO Mark) al doilea cel mai impresionant pivot al lui Zuckerberg (după mobil) pe o platformă care a evoluat constant de la începuturi.”

Sursa: https://www.forbes.com/sites/dbloom/2023/02/24/how-ai-and-the-cloud-are-erasing-the-borders-in-making-movies-and-tv- spectacole/