Jak umělá inteligence a cloud mažou hranice při natáčení filmů a TV

Pokud se zdá, že konverzace o umělé inteligenci a cloud computingu jsou v dnešní době všude, nejen ve vzácných kruzích techniky a investorů, je to pravda. A nikde to neplatí více než v zábavním průmyslu, kde se kreativní i obchodní třída zajímají o to, jaké možné důsledky pro řemeslo, které léta zdokonalovali, a jsou nadšeni demokratizační silou technologií.

Na nedávném filmovém festivalu Sundance jsem mluvil s řadou režisérů, střihačů a dalších, kteří využívají nové možnosti umělé inteligence a cloud-to-camera, které transformují proces filmové a televizní produkce, a s vedoucími pracovníky společnosti Adobe, která vytváří široce používaný střihový software Premiere Pro a další nástroje umožňující kreativitu.

Je to pozoruhodná doba, rychle se vyvíjející, s neuvěřitelnými předpovědi, pozitivními i negativními, ale také s několika skvělými příležitostmi, jak předělat způsob, jakým se film a televize (říkejme jim jen na videu) dělaly po více než století.

Objetí průmyslu teprve začalo. ComcastCMCSA
, například právě přijato technická Emmy za použití umělé inteligence k rychlému vytváření sportovních videí.

Hvězdy a jejich zástupci si toho také všímají, protože technologie AI se objevují i ​​ve specializovaných koutech tohoto odvětví.

Například talentová agentura CAA podepsal strategické partnerství s Metaphysic, která poskytuje nástroje pro „odstranění stárnutí“. Zde, funkce Miramax založená na grafickém románu. Hvězdy Tom Hanks a Robin Wright budou hrát postavy v jedné místnosti, jak stárnou o mnoho let, od jejich dávného mládí dále.

Pro agenturu je přitažlivost takové technologie zřejmá: jejich největší hvězdy/klienti jsou najednou životaschopní ve více rolích, o desítky let déle.

Osvěžující možnosti nové technologie

Ale každý den se možnosti pro střihače, režiséry a další, kteří se podílejí na složitém úkolu vytvořit projekt založený na videu, otevírají. V rozhovorech se začínajícími autory, jejichž nezávislé a dokumentární projekty naplňují plán Sundance, je jasné, že vidí Premiere Pro jako vysokorychlostní platformu pro spolupráci, která umožňuje stále širší škálu možných kreativních využití stále širším spektrem možných tvůrců.

AdobeADBE
Meagan Keane, produktová marketingová ředitelka pro profesionální video, nazvala AI „obrovským otevíráním dveří možností, když přemýšlíme o budoucnosti filmové tvorby. Myslíme si, že budoucnost je pro všechny."

Myslí tím, jak může umělá inteligence posílit lidskou kreativitu, spíše než ji nahradit, jak se někteří obávají. Nástroje založené na umělé inteligenci by mohly tvůrcům poskytnout skromné ​​nebo žádné technické dovednosti, zdroje nebo spojení s módními působivými projekty ve videu a dalších médiích. Dokonce i nyní, pro profesionální tvůrce, umělá inteligence snižuje náročnost opakujících se úkolů, jako je procházení záběry pro konkrétní scénu, což umožňuje editorům a dalším tvůrcům soustředit se na (doslova) větší obraz.

Ale je to větší než to, řekl Michael Cioni, vrchní ředitel globálních inovací Adobe a dlouholetý šampión technologií camera-to-cloud s Frame.io vlastněným Adobe.

Každý digitální majetek Také cloudový majetek

Jednoduše to říká: „Do roku 2031 bude každé elektronické aktivum generované v médiích a zábavě generováno v cloudu, v cloudu. To je pravda. Tomu říkám technologická jistota, že každé elektronické aktivum, které se vygeneruje zařízením, bude generováno v cloudu, místo řekněme na místním pevném disku, celuloidu, videopásce nebo paměťové kartě.

Ve známém cyklu transformace médií byly textové dokumenty první, které zamířily do cloudu (a do AI). Nyní jsou běžně vytvářeny, sdíleny a přetvářeny v cloudových službách, jako jsou Dokumenty Google, Apple Pages, Microsoft Word a Acrobat od Adobe. Stovky milionů lidí poslouchají (a vytvářejí, spolupracují a prodávají) hudbu v cloudu díky Spotify, Apple Music, Amazon Music, Tidal a dalším. Nyní mění nejsložitější média, která vytváříme.

"Řekněme, že děláte filmovou scénu," řekl Cioni. "Po natočení scény budete schopni napsat jazykem: 'Aby to pršelo'." A v záběru se objeví voda, začne pršet. 'Make it snow,' a začne se objevovat v záběru. A k tomu nemusíte být inženýr. To opravdu vypadá jako sci-fi, ale bude to zcela proveditelné. Vidíme, že se to děje ve velmi raných fázích statického obrazu (fotografie) a víme, že to přejde do videa. A to je opravdu důležitý atribut toho, kde musíme přemýšlet o tom, jak to ovlivňuje kreativní lidi.“

To má spoustu důsledků pro budoucnost tvorby pohyblivých obrázků. Jak řekl Leonard Cohen před dlouhou dobou, když se ve svých 30 letech změnil z básníka na prozaika a zpěváka/skladatele, „hranice mezi mnoha snahami se vytratily“.

Mnoho mladších filmařů tyto hranice běžně překračuje, při tvorbě svých projektů dělají od všeho trochu a běžně spolupracují na digitálních platformách. S doručováním z cloudu do fotoaparátu a inteligentními inteligencemi mohou natočit scénu, rychle vytvořit hrubou „sestavu“ jako výchozí místo pro úpravy a zároveň určit, zda je dostatek na to, aby scéna „fungovala“, nebo zda je potřeba více natáčet. .

Mohou také zdrsnit základní vizuální efekty, korekci barev a dokonce i zvukový design, než jej předají specialistům k doladění. Jako takový se Premiere pro mnoho tvůrců Sundance stal více než tradičním nelineárním programem pro úpravu videa.

Budování nového vztahu mezi lidmi a obrazy

„Toto je jedna z našich největších vášní: vztah mezi lidmi a kamerami a jak to ovlivňuje společnost,“ řekl Maximilien Van Aertryck, spolurežisér (a spolueditor) provokativního dokumentu. Fantastický stroj, Který získal zvláštní cenu poroty Sundance za kreativní vizi. "Jsme jako antropologové, kteří se rádi baví."

Jejich dokument jemně vyzývá k uváženému přístupu ke světu, který pomocí těchto nových nástrojů vytváříme. Jak zněl starý politický vtip, „komu budeš věřit: mně nebo tvým lživým očím? Stále častěji musíme rozumět tomu, kdy naše oči jsou lhaní a pohyblivým obrázkům by se mělo věřit, řekl Aertryckův spolurežisér/editor Axel Danielson.

"Film nemá mnoho odpovědí," řekl Danielson. "Má to otázky. Jedinou odpovědí, kterou známe, je, že jako společnosti musíme brát mediální gramotnost velmi vážně.“

Projekt shromažďuje více než století pohyblivých obrazů, které sahají až k průkopníkům, jako je Georges Melies (jehož královský subjekt by vykřikl, co se stalo názvem filmu). Cestou se zastaví u znervózněně zapálené Leni Riefenstahl, která přehrává své oblíbené záběry z nacistického shromáždění v Norimberku, a bojovníka ISIS, který opakovaně kazí své linie v navijáku z náboru teroristů. Obsahuje také mnohem jemnější kousky, ale jde o to, že skvělí a příšerní tvůrci budou využívat nové nástroje mnoha způsoby.

On Fantastický stroj, Van Aertryck a Danielson strávili roky sbíráním osobitých klipů o komplikovaném vztahu mezi lidmi/kamerami a obrazy, které vytvářejí. Jakmile přišel čas sestavit film, na dálku spolupracovali se střihačem Mikelem Cee Karlssonem a výkonným producentem Rubenem Ostlundem, scenáristou a režisérem, který byl dvakrát nominován na Oscara (Trojúhelník smutku), jejíž Platforma Produktion film produkovala.

„Nejsme vyškolení redaktoři; děláme to, protože to udělat musíme,“ řekl Van Aertryck. „Adobe se pro nás stává perfektním nástrojem, protože tam můžeme hodit všechno a sdílet to tam a zpět.“

Tito čtyři používali cloudové nástroje Premiere k obchodování s klipy a sekvencemi, jako by seděli kolem stolu, řekl Van Aertryck, přestože byly rozšířeny po celé západní Evropě od Baltu (Göteborg, Švédsko) po Baleáry (Mallorca). To je obzvláště vzdálený příklad svobody, kterou dává tvůrcům přicházet odkudkoli a pracovat téměř kdekoli, pokud potřebují nebo chtějí.

„Možnost sdílet online umožňuje mnohem více,“ řekl Crystal Kayiza, spisovatel-ředitel Odpočívadlo, který získal cenu poroty Sundance za americký krátký film. "Pokud se chci vrátit do Oklahomy, mohu to udělat, pokud budu v (vytvářet) krátký."

V loňském roce společnost Adobe oznámila nové funkce přímého přenosu do cloudu v některých populárních fotoaparátech a dalších produkčních zařízeních, které současně přenášejí video při jeho zachycení. To umožňuje střihačům, producentům, vedoucím pracovníkům a dalším specialistům na postprodukci začít pracovat na záběrech již několik minut po natočení.

Technologie využívají i malé výroby. Při vytváření cloudových připojení bylo zásadní, zejména na začátku Chystáte se na univerzitu v Mariachi, řekla Daniela T. Quiroz, která získala cenu Sundance za střih.

Režiséři Alejandra Vasquez a Sam Osborn stále natáčeli dokument o středoškolských tanečních soutěžích v texaském Rio Grande Valley, když Quiroz z Brooklynu začal projekt dávat dohromady. Její raný a svěží pohled na již pořízený materiál pomohl utvářet následné natáčení a oblasti zaostření.

"Jako redaktoři máme jedinečnou výsadu vidět tyto lidi poprvé před kamerou," řekl Quiroz. "Opravdu uvidíte, do koho se zamilujete a do jaké hudby se zamilujete."

Obejít se bez těchto okamžitě dostupných digitálních deníků, jako byly „staré časy“ před několika lety, bylo při natáčení nutností. Někdy přemýšlím o umírání na místě v odlehlé části pobřeží Oregonu. Místo toho byly záznamy každého dne nahrány na pevné disky a poté odeslány přes noc do New Orleans, aby je zpracovali digitální zprostředkovatelé. Byla to připomínka vylepšení, která technologie přinesla, řekl editor Ryan Kendrick.

Nový druh spolupráce

To umožnilo Kendrickovi z Nashvillu začít se střihem a spolupracovat s režisérkou Rachel Lambert a dalšími v různých státech.

"Jak skvělé je, že mohu pracovat s tím, s kým chci pracovat, a nejsme vázáni na stejné místo," řekl Kendrick. Mění také dynamiku mezi režiséry, kameramany, střihači a zbytkem produkce.

"Vždy ses cítil izolovaný od natáčení," řekl Kendrick. "Nyní se s tím cítíte více spojeni." Necítíte se tak odděleni od tónu, který vydávají. Střihna je opravdu skvělé místo, kde můžete dělat spoustu chyb a dělat pravý opak toho, co chcete. Vždycky říkám: ‚Nevím. Pojďme na to přijít.“

On Někdy mám pocit, jako bych umíral, Kendrick, Lambert a kameraman Dustin Lane začali mluvit každý týden dlouho předtím, než natáčení skutečně začalo, aby včas odvrátili potenciální problémy.

"Budeme mluvit o problémech se střihem, které by se mohly objevit," řekl Kendrick. „Když dostanete scénáře, nejtěžší věc na přemýšlení je, jak film přejde do dalšího dílu. Konkrétně ve filmu (protagonisté) chodí do kin. Hodně jsme mluvili o tom, jak získáme snímky, které potřebujeme, abychom si udrželi emocionální váhu.“

Rychlé obraty, které je možné pomocí Camera-to-Cloud dosáhnout, jsou zvláště užitečné pro krátké projekty, jako jsou reklamy a hudební videa, řekl Kendrick.

"Některé obraty v reklamách jsou divoké," řekl Kendrick. Možnost předávat projekty tam a zpět v Premiere Pro, Frame.io a After Effects byla skutečně proveditelná pouze s cloudovou architekturou.

„Je to největší (zpoždění ve výrobních pracovních postupech), které bylo za posledních pět let odstraněno,“ řekl Kendrick.

Hlavní principy budování lepší technologie

Přístup Adobe ke svým technologiím je postaven na pěti „hlavních principech“: pracovní postup, média, spolupráce, produktivita a zabezpečení, řekl Keane.

„Umělou inteligenci jsme skutečně zapojili do ‚produktivity‘,“ řekl Keane. „Nejde o výměnu kreativ. Jde o nahrazení všednosti.“

Hollywoodští odboráři pozorně sledují rychle se měnící prostor umělé inteligence. Puck oznámil, že představenstvo největšího hollywoodského odborového svazu SAG-AFTRA plánuje zahrnout otázku práv na podobenství – pomocí umělé inteligence k obnovení vzhledu, hlasu nebo jiných aspektů svých členů – do nadcházejícího vyjednávání o smlouvě.

Právníci pro talenty byli prozatím upozorněni, že „jakýkoli jazyk ve smlouvě, který má za cíl kontrolovat právo na simulaci hereckého výkonu, (je) ‚neplatný a nevymahatelný, dokud nebudou podmínky vyjednány s odbory‘,“ uvedl Puck. .

Složitá nová otázka by mohla letos na jaře vést k náročným kontraktům. Výkonní umělci mladšího a středního věku, kteří si chtějí rozšířit své kariérní příležitosti, mohou využít určité možnosti využití této technologie, ale bez silné smluvní ochrany mohou některé prodejny tuto technologii používat jako způsob, jak se vyhnout placení za digitální představení, která technicky nejsou herci.

Jeden hrubý příklad toho, co nakonec mohlo přijít, bylo možné po týdny najít na Twitchi, kde „watchmeforever“ vytvořili nekonečná „epizoda“ generovaná umělou inteligencí Seinfeld. „Přehlídka“ obsahovala špatně skloňované, počítačem generované hlasy, jednoduchou grafiku a vtipy, které nebyly nijak zvlášť vtipné. Pořad také naznačuje, co by nakonec mohlo být možné na mnohem vyšší kvalitativní úrovni. Stojí za zmínku, že nekonečná smyčka byla přerušena oznámením o vypnutí, když se stand-up rutiny postavy „Jerryho“ změnil v to, co bylo považováno za anti-trans rutinu.

Otevření světa kreativním činnostem

Mnohem pozitivnější je, že Keane z Adobe poukazuje na mnohem širší přístup ke kreativním nástrojům, které bude AI a cloud pohánět. Eliminuje potřebu velkých renderovacích farem pro generování procesních obrazů a zvuku, generování efektů a ostatní, přičemž stále poskytuje výpočetní výkon a zabezpečení, které potřebuje jakýkoli středně ambiciózní video projekt.

„Pokud dokážete centralizovat cloud, můžete otevřít možnost, aby příběhy přicházely z celého světa,“ řekl Keane. „Spolupráce musí být v každé fázi. Sdílená perspektiva buď posílí vaše nápady, nebo vás dále vyzve.“

Jako příklad důležitosti bezpečnosti pro filmaře poukázal Keane Plán C, dokumentární film Sundance o potratech. Jeho tvůrci potřebovali udělat vícenásobné rozmazání tváří a hlasů některých rozhovorů na kameru a také železné zabezpečení pro nerozmazaná původní média.

Exploze generativní AI, hluboké padělky a související problémy také znamenají, že autenticita je důležitější než kdy jindy, řekl Keane. Adobe je členem Content Authenticity Initiative spolu s dalšími mediálními a technologickými společnostmi, jako je New York TimesNYT
a Canon.

Keanu Reeves, hvězda ikonické sci-fi série The Matrix, je méně sangvinický. Nedávno řekl Wired, že jedno škodlivé použití videa s pomocí AI, vytvoření deepfakes, je „děsivý“. Reevesovy smlouvy běžně zahrnují klauzuli zakazující studiím digitálně manipulovat s jeho výkonem, což je ustanovení, které se datuje po desetiletí k produkci, která mu vtiskla do tváře virtuální slzu.

"Co je na tom frustrující, že ztratíte svou agenturu," řekl Reeves o invazivních praktikách. „Když hrajete ve filmu, víte, že budete sestříháni, ale podílíte se na tom. Pokud půjdete do hluboce falešné země, nemá žádný z vašich úhlů pohledu. To je děsivé. Bude zajímavé sledovat, jak se lidé vypořádají s těmito technologiemi.“

Další technologie, která mění hru

Další technologií pro posun hran, která je již dostupná v beta verzi na Premiere Pro, je takzvaná textová editace, která uživateli umožňuje upravovat video úpravou textu dialogu extrahovaného a přepsaného z videa umělou inteligencí. Umělá inteligence také zvýrazňuje důležitá zvuková sousta, dokáže sestavit počáteční sestavu finálního projektu a generovat vyhledávání na základě klíčových slov, aby bylo možné rychle najít konkrétní klipy nebo konverzace. Data vytvořená pro projekt se stávají mocným novým způsobem, jak efektivně spravovat všechny tyto záběry.

"Zaplňujete média všemi těmi bohatými daty," řekl Keane.

Některé menší společnosti již spustily podobné technologie. Popis a podcast můžete vytvořit digitální verzi vašeho hlasu a nechat jej číst textové skripty, aniž byste potřebovali další úpravy. Descript také nedávno přidal textové úpravy videa, ať už jde o podcasty nebo jiný obsah.

Redaktor Kendrick řekl, že již použil textové editační nástroje Adobe, aby pomohl příteli rychle otočit minidokument z Aljašky. Textová editace bude pravděpodobně nesmírně užitečná pro takzvané „preditory“, producenty/redaktory, kteří se obvykle musí prodírat dny záběry, aby rychle sestavili neskriptované pořady v napjatých časových osách, řekl Kendrick.

Zvukové knihy, skripty, sociální média, jak také získat umělou inteligenci

Umělá inteligence se dostává také do mnoha dalších koutů zábavy. JablkoAAPL
zahájena sada nástrojů umělé inteligence navržená k vytváření vyprávění pro audioknihy, což pro autory vytváří další možnost vytvářet levné zvukové verze svých projektů „vyprávěných digitálním hlasem na základě lidského vypravěče“. Tato zpráva spustila hlasité námitky ze strany elitních sborů lidských vypravěčů audioknih a jejich hojných fanoušků.

Určitě existuje důvod vážit si nejlepší práce těchto lidských vypravěčů a může trvat dlouho, než se nástroj umělé inteligence přiblíží přesvědčivým hlasům a výkonům nejlepších lidských čtenářů v nejlepších knihách.

Ale náklady na využití tohoto talentu jsou daleko za finančními prostředky desetitisíců knih vydávaných každý rok. To je místo, kde by sada nástrojů od Applu mohla poskytnout přístup na další trh těm drobným knihám, autorům a vydavatelům, kteří se pokoušejí oslovit dříve vzdálený trh, který již má celosvětově hodnotu 1.5 miliardy dolarů.

Startup Filmová scéna používá umělou inteligenci k rozbití komponent scénáře, včetně prvků, jako je obsazení, rekvizity, kostýmy, použitá vozidla, zvuky, lokace a další.

A pokud jde o krátkou, krátkou video stránku podnikání, TikTok, Meta's Reels a Alphabet's YouTube Shorts jsou všechny závislé na strojovém učení a nástrojích AI, aby naservírovaly další „doporučené“ video, o kterém si myslí, že se budete chtít dívat, a propojení reklam s tímto prostředím způsobem, který je bezproblémovější a poutavější.

Volal analytik Rich Greenberg z LightShed Partners přechod Facebooku na vylepšená doporučení obsahu řízená umělou inteligencí je extrémně nákladná, ale „v konečném důsledku by to mohlo dokázat (generální ředitel společnosti Meta Mark) Zuckerbergův druhý nejpůsobivější pivot (po mobilním zařízení) na platformě, která se od svého založení neustále vyvíjela.“

Zdroj: https://www.forbes.com/sites/dbloom/2023/02/24/how-ai-and-the-cloud-are-erasing-the-borders-in-making-movies-and-tv- ukazuje/