De in Belfast woonachtige componist won onlangs de Jury Award op het Cannes Short Film Festival voor zijn AI-film The Crow .
Marshall had eerder lof verdiend voor een door AI gegenereerde Daft Punk-video , maar hij paste een andere benadering toe op The Crow .
Terwijl zijn eerdere techniek tekst in willekeurige visuele mutaties veranderde, gebruikt The Crow een onderliggende film als beeldreferentie.
“Ik was zwaar op het idee gekomen van overdracht in AI-stijl met behulp van videobeelden als bron”, vertelde Marshall aan TNW.
“Dus elke dag was ik op zoek naar iets op YouTube of stockvideosites en probeerde ik een interessante video te maken door deze te abstraheren of om te zetten in iets anders met mijn technieken.
“Het was in die tijd dat ik Painted ontdekte op YouTube – een korte live-action dansfilm – die de basis zou worden van The Crow .”
Marshall voedde de videoframes van Painted met CLIP , een neuraal netwerk gemaakt door OpenAI.
Vervolgens vroeg hij het systeem om een video te genereren van ‘een schilderij van een kraai in een desolaat landschap’.
Marshall zegt dat de output weinig kersenplukken vereiste. Hij schrijft dit toe aan de overeenkomst tussen de prompt en de onderliggende video, waarin een danseres in een zwarte sjaal de bewegingen van een kraai nabootst.
“Het is dit dat de film zo goed doet werken, aangezien de AI probeert om elk live action frame eruit te laten zien als een schilderij met een kraai erin, dus ik ontmoet het halverwege, en de film wordt een soort strijd tussen de mens en de AI – met alle suggestieve symboliek.”
In de toekomst wil Marshall 3D-animatie toevoegen aan zijn AI-creaties. Hij onderzoekt ook CLIP-geleide videogeneratie, die gedetailleerde op tekst gebaseerde aanwijzingen kan toevoegen, zoals specifieke camerabewegingen.
Dat zou kunnen leiden tot hele speelfilms die door tekst-naar-videosystemen worden geproduceerd. Maar Marshall gelooft dat zelfs zijn huidige technieken mainstream erkenning kunnen krijgen.
Hij zegt dat The Crow nu in aanmerking komt voor inzending voor de prestigieuze BAFTA Awards.
“Ik heb geen toespraak voorbereid, maar ik fantaseer over het verzamelen van een prijs, in de rol van een heraut van AI, en verkondigen aan het met sterren bezaaide publiek dat [voor] ieder van jullie, acteur, regisseur, decorontwerper, kostuumontwerper, artiest, componist… AI komt eraan, en je zult snel een heel andere baan hebben – of helemaal geen baan meer.”
Ik ben helemaal fan van Ai….
Totally ik snap ook wat het betekend in die film, voor iemand die het nog niet kent is het misschien rommelig en slordig enzo maar een computer maakt dit nav woorden…dat is amazing!
Het maakt de meest mooie kunstwerken zelfs zo onvoorstelbaar dat het mij diep roert…
Het is zo mooi…
Nah goed ik bewerk foto’s e.d. en maak ze tot kunst, en ik heb nu een nieuwe hobby nml… het bewerken van Ai…
Ik heb er nu 4 gemaakt en ik vind ze beeldschoon.
Ik ga ze tzt gebruiken in een nieuwe orakelset, maar waarom bewerk ik het… ik bewerk dat wat net niet af is…
net niet klaar dankzij Ai en dan geef je net dat zetje en ik gebruik ook meerdere plaatjes om er een nieuw geheel van te maken.
Onderstaand heb ik gemaakt met Ai plaatjes…en deze vorm ik tot een geheel.
Ik zal er meer maken binnenkort…
Ik wacht altijd even op de inspiratie van boven… 😉
