Binnen het onderzoeksproject Promptable AI Camera, kortweg 'PAIC', onderzoekt het Immersive Lab hoe artificiële intelligentie videoproductie kan veranderen. Niet als losse gimmick, maar als onderdeel van een bredere onderzoekslijn rond realtime beeldbewerking, virtuele productie en nieuwe creatieve workflows voor makers, bedrijven en de evenementensector. Jeroen Cluckers, creative research lead binnen het Immersive Lab en medebedenker van 'PAIC' gaf onlangs een interview aan het magazine 'Kennismakers'.
'PAIC' is geen fysieke camera, het is een programma dat beelden kan bewerken van om het even welke bron: een filmcamera, webcam of smartphone. Via tekstprompts kunnen videomakers live special effects toevoegen, achtergronden veranderen of zichzelf in een ander personage transformeren.
Volgens Jeroen verschuift AI de klassieke manier van videomaken:
Vroeger bestond een productie meestal uit drie duidelijke fases: preproductie, productie en postproductie. Vandaag lopen die fases steeds meer door elkaar. Dat komt door AI, maar ook door software uit de gamingwereld, zoals Unreal Engine. Met 'PAIC' willen we nog een stap verder gaan. Je kan in een livestream dinosaurussen, ruimteschepen of aliens achter je laten opduiken, of jezelf in een totaal ander personage veranderen. Zie het als een videoproductie assistent 'on steroïds'.
Realtime AI-video is technisch niet vanzelfsprekend. De rekenlast is enorm, zegt Jeroen. Daarom ontwikkelt het team manieren om de verwerking efficiënter te verdelen over meerdere grafische processoren (GPU's). Daardoor werkt elke GPU drie tot vier keer sneller.
Voor het Immersive Lab past 'PAIC' in een ruimer onderzoek naar hoe makers met AI meer controle, snelheid en verbeeldingskracht kunnen krijgen in hun creatieve proces. Tegelijk blijft de kritische vraag belangrijk: wat betekent het wanneer beelden live kunnen worden aangepast, gegenereerd of gemanipuleerd?
AI-modellen worden vandaag al gebruikt om mensen in videoboodschappen na te bootsen. Dat kan leiden tot misbruik. Er is dus regelgeving, maar het blijft belangrijk om zelf waakzaam te zijn.'PAIC' toont vooral hoe snel videoproductie verandert. Van lange trajecten met aparte fases naar workflows waarin beelden live kunnen ontstaan, reageren en veranderen. Of zoals Jeroen het samenvat: Met PAIC gaan we eigenlijk nog een stap verder.
Pipeline-developer op dit project, Joshua Hall, neemt je graag nog even mee voor een korte 'behind the scenes' van 'PAIC' in onderstaande video:
Met dank aan het magazine 'Kennismakers' voor het artikel:
https://kennismakers.be/interview/de-ai-camera-waarmee-je-live-special-effects-creeert
