Adobe integreert Firefly Video en AI-modellen van derden in Premiere, zodat bewerkers AI-gegenereerde inhoud aan films kunnen toevoegen

Adobe heeft generatieve AI geïntegreerd in Adobe Premiere zodat editors snel door kunstmatige intelligentie gecreëerde inhoud aan films kunnen toevoegen. De AI-modellen omvatten Adobe Firefly Video en modellen van derden, zoals Pika en Sora. Adobe is van plan om verdere integratie van derden mogelijk te maken door een AI plug-in standaard te creëren.

Generatieve kunstmatige intelligentie heeft zich snel ontwikkeld en vandaag de dag zijn AI-modellen zoals Sora snel overtuigende, korte videoclips maken met realistische acteurs en scènes op basis van tekstaanwijzingen. Hoewel de technologie om een kaskraker te maken van een script niet bestaat, is de huidige AI-technologie nuttig genoeg om editors te helpen.

Adobe heeft drie belangrijke manieren gedemonstreerd waarop AI kan helpen, en lezers die met Adobe Premiere aan de slag willen, kunnen vandaag een abonnement kopen samen met het officiële trainingsboek.

De eerste is het maken van nieuwe B-roll om te helpen bij de overgang tussen scènes of om ontbrekende opnamen in te vullen. Terwijl grote filmproducties nauwgezet een gedetailleerde opnamelijst volgen, is dat bij kleinere producties niet het geval, waardoor een kritisch shot gemist kan worden. In plaats van meer geld uit te geven om terug te gaan naar de locatie om een ontbrekend shot opnieuw op te nemen, kan AI zoals Sora nieuwe shots creëren op basis van tekstaanwijzingen. Naarmate de technologie voortschrijdt, zal het vermogen van AI om goed op elkaar afgestemde opnamen te maken steeds beter worden.

De tweede is het toevoegen en verwijderen van objecten uit scènes. Vroeger moesten special effects-artiesten handmatig objecten maskeren, volgen en toevoegen of verwijderen. Dit kan uren duren voor een eenvoudig object zoals een ongewenst bord of dier, omdat het veel tijd kost om de vervangende achtergrond te maken in een 3D-bewerkingstoepassing zoals Maya of te schilderen in een 2D-toepassing zoals Photoshop. Adobe Firefly Video vereenvoudigt dit door gebruik te maken van de snelheid van AI om automatisch objecten toe te voegen of te vervangen en tegelijkertijd naadloos gaten in de achtergrond te vervangen.

De derde is de eenvoudigere taak om een video met een paar frames of seconden te verlengen. Meestal houden filmopnames een scène een paar seconden langer vast dan geschreven, zodat editors netjes tussen scènes kunnen knippen. Maar in sommige gevallen is een scène te kort, waardoor de overgang tussen twee scènes onhandig wordt omdat het te snel gaat. Firefly AI kan gloednieuwe frames maken om de clip op een realistische, naadloze manier te verlengen.

Een potentieel probleem van Adobe's AI-integratie-aanpak is dat ze van plan zijn om alle AI-gegenereerde inhoud te taggen met Content Credentials met informatie over hoe het gemaakt is en de AI-modellen die gebruikt zijn. Dit geeft aanleiding tot privacyproblemen omdat de handelsgeheimen van een artiest kunnen worden onthuld, mogelijk samen met persoonlijke of eigendomsinformatie.