Animační průmysl se nachází na kritické křižovatce. Uprostřed měnících se priorit, úzkosti z práce a explozí generativní umělé inteligence od roku 2023 má mnoho kreativců pocit, že se jim pod nohama utíká zem.
Online reakce proti projektům podporovaným umělou inteligencí jsou časté a prudké, jak ukázaly kontroverze Amazon GenAI Creators’ Fund. Mnoho umělců je rozhodnuto se této technologii úplně vyhnout, ale jeden animátor zvolil jiný přístup a spolupracoval přímo s jednou z největších světových laboratoří pro výzkum AI.
Poté, co se Connie He ostříhala jako generalistka CG na projektech Netflix, než získala roli příběhové umělkyně v Pixar’s Inside Out 2, udělala nečekaný skok do Google DeepMind. Tam režírovala Dear Upstairs Neighbor, krátký animovaný film vytvořený pomocí originálního umění jako reference pro jedinečný generativní AI animační kanál (viz trailer níže).
Setkal jsem se s Connie, abych zjistil, proč se rozhodla překročit propast, jak její tým vybudoval potrubí, které respektuje lidské řemeslo, a proč věří, že spíše než produkování generativní AI může generativní AI ve skutečnosti pomoci učinit animaci rozmanitější.
Connie přiznává, že zažila období hlubokého vnitřního konfliktu, když se poprvé objevily nástroje jako Midjourney a DALL-E, ale když viděla okamžitý dopad na sektor, rozhodla se, že ignorovat technologii nepřichází v úvahu.
“Motivace začít skákat do toho je proto, že mám pocit, že pokud se tato technologie bude dál vyvíjet, umělci musí zůstat v konverzaci, než se vyhýbat,” řekla mi. “Musíme postavit most a vést tento rozhovor s lidmi, kteří staví technologii, a vybudovat vzájemné porozumění o tom, co je kreativita a co umělci potřebují.”
Průlomový okamžik pro ni přišel z nepravděpodobného zdroje: ze starého rozhovoru, ve kterém islandská hudebnice Björk diskutovala o názorech lidí na elektronickou hudbu. “Lidé se mnou vždycky mluví, jako by počítačová hudba neměla duši, ale nemá duši, protože jsi do ní nevložil duši.” animátor si vzpomíná, jak říká Björk. “Ten okamžik byl pro mě jakýmsi okamžikem osvícení. Otázka zní: jak se do toho můžeš vložit? Je to nástrojová otázka.”
Pro ty, kteří se obávají, že umělá inteligence znamená napsat textovou výzvu a nechat stroj dělat práci, Dear Upstairs Neighbor demonstruje jiný plán.
Krátký film vypráví příběh Ady a jejích potíží se spánkem kvůli hlučným sousedům. Je to jednoduchý příběh s některými překvapivými zvraty vyprávěnými prostřednictvím viscerálního uměleckého stylu, který se snaží zachytit narůstající zoufalství postavy.
Projekt zcela zavrhl generování textu na video a místo toho se soustředil na propojení obrazu a videa pomocí ručně kresleného umění a účelově trénovaných modelů strojového učení.
Každý design postavy, storyboard a kus koncepčního umění byl vytvořen lidskými umělci. Connie sama namalovala sérii abstraktních akrylů na papír, které byly naskenovány a použity k výcviku vlastních modelů neboli LoRA. Ty byly poté použity v hybridním 2D/3D animačním procesu spolu s Mayou, jedním z nejlepších animačních programů. Výsledkem je komplexní, texturovaný vzhled „živé malby“, který by tradiční kanály CG animací jednoduše nebyly schopny replikovat.
„V počítačové grafice je to vždy těžké, protože všechno bude vypadat jako CG – tak jsou vytvořeny renderovací systémy a věci se pohybují CG způsobem,“ poznamenává Connie. “Ale model strojového učení je schopen převzít designová pravidla, která mu dáváme, něco, co s počítačovou grafikou nedosáhnete. Dokázali byste to udělat pomocí tradiční 2D malby? Technicky ano, ale pravděpodobně by vám to trvalo 10 let.”
Tradiční kanály CG animací jsou těžce zatěžovány, umělci předávají práci na renderování farem. Connie říká, že v DeepMind spolupracuje ruku v ruce se softwarovými inženýry na vytváření nástrojů, které upřednostňují uměleckou kontrolu před automatizací.
Když tým narazil na klasický výstup s AI překážkou, spolupracovala s výzkumníkem na sestavení vlastního systému pomocí masek exportovaných z Mayi, které stabilizovaly obličej postavy a zároveň umožnily vlasům a pozadí zachovat si drsné, malířské blikání, když je to žádoucí, aby odrážely Adin emocionální stav.
“Hodně času mě inspirovali výzkumníci,” říká. “Nedokázal jsem si ani představit, že by to bylo možné, ale pochopili můj záměr a vytvořili systém, který to umožní. Teď vidím, že tento typ efektu je možný, jak toho můžeme využít k maximalizaci našeho vyprávění?”
Obraz 1 z 5
V místnosti je samozřejmě slon. Connie si je vědoma etických obav spojených s používáním AI. Použila modely trénované na jejím vlastním umění, ale uvědomuje si obavy o autorská práva kolem základních modelů, které jsou jejich základem
“Doufám, že přijde nějaká právní regulace, protože tato oblast je nyní prázdná,” říká. “Bez právního rámce bude těžké vést tento rozhovor promyšleným a uctivým způsobem.”
Pokud jde o to, zda by velká studia jako Pixar mohla přijmout animaci AI, zůstává realistická. “Bude to chvíli trvat, než jak strana technologických nástrojů, tak lidé, kteří provozují studia, zjistí, co přijde. Chvíli to bude chaotické, ale nakonec se najdou dobří lidé, kteří budou pracovat na tom, aby to bylo méně chaotické.”
V konečném důsledku nepovažuje AI za náhradu za umělce, ale za nedokončené médium, které potřebuje umělecké vedení a které by mohlo, pokud by se použilo chytře, otevřít animátorům nové kreativní možnosti.
“Pro mě je to jako nová, čerstvá krabička s barvami. Akvarel je médium, olejomalba je médium, počítačová grafika je médium. Právě teď má tato nová krabička s barvami jen několik barev, které mohou umělci použít. Je tam spousta prázdných míst. Ale když se to rozšíří, doufám, že je umělci mohou použít k vytvoření věcí, které dříve nebyly možné.”