Netflix heeft kunstmatige intelligentie in ongeveer 300 producties op verschillende manieren toegepast, aldus Lee Sung-gyun, senior director of APAC production van het bedrijf.
Lee sprak tijdens een sessie getiteld “Film Production and AI: New Tools, New Possibilities” op het Busan International Film Festival. Het evenement werd mede georganiseerd door Netflix en de MPA als onderdeel van het Creative Asia-initiatief voor opkomend Aziatisch talent.
Lee legde uit dat ai helpt bij previs, production design, set-dressingconcepten, montagewerk en visuele effecten. Hij toonde voorbeelden van Netflix’s Eyeline VFX-studio die hybride producties demonstreren waarbij live-actionbeelden worden gecombineerd met generatieve tools, waaronder grote menigtescènes die voor de Indiase serie “Glory” zijn gemaakt en anders vanwege budget- en planningbeperkingen zouden zijn geschrapt.
Regisseur Kang Yoon-sung zei dat ai-workflows 30 tot 40 procent van het budget van een speelfilm kunnen wegnemen. Hij verwees naar zijn eigen berekeningen voor het aankomende project “The Gulf of Aden”, die een geschatte besparing van 40 procent lieten zien, niet alleen door vervanging van cg en vfx maar ook door de opnames te vereenvoudigen en de totale productietijd te verkorten.
Toen we berekenden hoeveel we zouden besparen op ‘The Gulf of Aden’ voor de fondsenwerving, kwam dat neer op een daadwerkelijke reductie van ongeveer 40 procent. Dat komt niet alleen door vervanging van cg en vfx. De opnames zelf werden eenvoudiger en de totale productietijd werd deels ingekort.
Kang Yoon-sung, die “Run to the West” mede regisseerde met ai-filmmaker Kwon Han-seul, merkte op dat de ai-kwaliteit in slechts één jaar tijd dramatisch is verbeterd. De film, aangekondigd als Korea’s eerste speelfilm die ai gedurende de hele productie inzet, ging afgelopen oktober in de Koreaanse bioscopen in première. Hij voegde eraan toe dat huidige tools 4k-output in 10-bit kleur of hoger kunnen leveren, geschikt voor bioscooprelease.
Tegelijk waarschuwde Kang Yoon-sung dat een zwaar beroep op ai de gezamenlijke discussie en gedeelde ervaring kan verminderen die traditioneel centraal staan in het filmmakerschap. Hij constateerde dat de technische kwaliteit hoog is, maar dat de emotionele impact op het publiek soms is afgenomen.
De kwaliteit van de beelden die ai maakt is erg hoog, maar als het gaat om emotie overbrengen en het publiek raken, denk ik dat we in een periode zitten waarin het eigenlijk slechter is geworden.
Lee Sung-gyun was het ermee eens dat technologie de “hoe” van de productie verbetert, maar niet de “waarom” achter een verhaal bepaalt. Hij benadrukte dat een menselijke touch nog steeds nodig is om emotie effectief over te brengen.
Al deze technologische veranderingen en nieuwe tools hebben enorm geholpen bij de ‘hoe’, hoe we wat we maken beter maken, maar ze hebben nooit de ‘waarom’ bepaald, waarom we dit verhaal moeten vertellen. Ai is hetzelfde.
Kimball Thurston, chief technology officer bij Wētā FX, beschreef de deep-learning denoiser van het bedrijf als ondersteunende ai die de creatieve intentie niet verandert. Hij merkte op dat Wētā FX al minstens tien jaar machine learning toepast en wees op aanhoudende uitdagingen met kleurnauwkeurigheid in ai-modellen die vooral op video zijn getraind.
Zowel Lee Sung-gyun als Kimball Thurston spraken over duurzaamheid. Het data center van Wētā FX in Wellington gebruikt nu closed-loop koeling met nul liter water per jaar, terwijl Netflix de milieu-impact op bedrijfsniveau evalueert in plaats van ai-effecten apart te isoleren.
Kang Yoon-sung voorspelde dat ai-adoptie zal uiteenlopen: kort-form content zal snelheid en volledige automatisering prioriteren, terwijl speelfilms en drama’s nadruk leggen op geloofwaardigheid en emotionele resonantie. Hij sloot ook uit dat ai acteurs vervangt, vanwege de mechanische kwaliteit die echte emotionele overdracht belemmert.
Lee Sung-gyun sloot de sessie af met de opmerking dat verrassende nieuwe tools zullen blijven opduiken, maar dat de kernvraag blijft bestaan naar verhalen die door menselijke schrijvers en makers worden gevormd.