AI-gegenereerde video's met consistente personages en scènes? Praktijktest van Vidu.com
Kwesties met betrekking tot kunstmatige intelligentie.
Vidu.com beweert dat zijn AI video's kan genereren met consistente personages en omgevingen. Dat zou betekenen dat u meerdere sequenties met dezelfde "acteurs" aan elkaar kunt rijgen en mogelijk hele (korte) films kunt maken. Maar werkt het ook echt? Wij hebben de proef op de som genomen.Christian Hintze (vertaald door DeepL / Ninh Duy) Gepubliceerd 🇺🇸 🇩🇪 ...
Verdict - Groot potentieel, maar nog niet aanwezig
De mogelijkheden (en risico's) zijn indrukwekkend. AI zal ongetwijfeld niet alleen het maken van content, maar ook de film- en game-industrie een nieuwe vorm geven. Het hebben van consistente personages, settings en omgevingen is een grote stap op weg naar het praktisch maken van AI-videogeneratoren die niet alleen als nieuwigheid gebruikt kunnen worden.
Maar op dit moment is het er nog niet helemaal. Wat heeft het voor zin als de persoon hetzelfde blijft (ervan uitgaande dat hij hetzelfde blijft), maar dan door vaste voorwerpen loopt, zich plotseling dupliceert, of zes vingers aan één hand krijgt?
Op dit moment, Vidu.com meer aan als speelgoed. Het is leuk, maar de technologie is nog niet betrouwbaar genoeg voor professioneel gebruik in de film-, reclame- of soortgelijke sector. Er zijn gewoon te veel haperingen.
Pro
Contra
Prijzen en Beschikbaarheid
Iedereen kan Vidu.com gratis uitproberen na het aanmaken van een account. Het systeem werkt op credits. Nieuwe gebruikers krijgen een aantal startcredits, en u kunt meer verdienen door bepaalde acties uit te voeren.
Er zijn ook maandelijkse en jaarlijkse abonnementsopties.
Ondanks de terechte kritiek vinden wij AI op dit gebied fascinerend. Maar de kwaliteit van de output varieert enorm: aan de ene kant kunt u ongelooflijk gedetailleerde omgevingen rechtstreeks uit uw verbeelding krijgen. Aan de andere kant staren AI-gegenereerde mensen vaak wezenloos in de ruimte of bewegen ze in een vreemde slowmotion.
Dus gaven we de nieuwe AI-videogenerator Vidu.com zelf een kans. De ontwikkelaars waren zo vriendelijk om 500 credits aan onze account toe te voegen om te testen. Het vlaggenschip van het platform, Vidu Q1, kan tot zeven referentiebeelden in een enkele videosequentie verwerken. Ontbrekende elementen kunnen via tekstaanwijzingen worden gegenereerd.
Wat kunt u doen met Vidu?
Met Vidu kunt u AI-video's maken met deze hulpmiddelen:
- Tekst naar video: Typ een aanwijzing die beschrijft wat er in de video moet gebeuren
- Afbeelding naar video: Genereer een video uit een enkele afbeelding. Nog cooler: stel een begin- en eindframe in, en Vidu vult de overgang in
- Verwijzing naar video: De meest opwindende functie. Upload afbeeldingen van personages, locaties of objecten en de AI probeert ze consistent te houden in een video.
utput is Full HD, 16:9, met optioneel smartphoneformaat. Video's kunnen zelfs worden opgeschaald, bijv. naar 4K.
Hands-on ervaring - leercurve, nauwkeurige aanwijzingen
Ons ambitieuze plan:
- Scène 1: Een redacteur van Notebookcheck staat in een kantoor een laptop te testen.
- Scène 2: Hij typt een middelmatige beoordeling in.
- Scène 3: Cut naar een ander kantoor, waar mannen in pak bewakingsbeelden bekijken van de redacteur die die matige beoordeling intypt.
- Scène 4: Een van de pakken slaat op een alarmknop.
- Scène 5: Een SWAT-achtig team wordt gestuurd.
In totaal hebben we 10 ruwe scènes in kaart gebracht.
1. Scène: Redacteur test een laptop
We gebruikten een oudere, niet helemaal up-to-date foto van een van onze redacteuren als referentie voor het personage, plus een kantoorfoto voor de setting. We voegden ons Notebookcheck-logo, een laptop en een fictief PC-merklogo ("Lavani") toe. Vervolgens gaven we de volgende prompt:
In het kort: onze redacteur (Afbeelding 1) staat in het kantoor (Afbeelding 2) en test een laptop. Op de bakstenen muur op de achtergrond moet het Notebookcheck-logo (Afbeelding 3) verschijnen.
Het renderen van een clip van 5 seconden met het Vidu Q1-model duurt slechts ongeveer 1-2 minuten en kost 15-20 credits. Het resultaat?
We waren niet zo blij met de volgende problemen:
- Waarom komt het kapsel van ons personage niet overeen met de referentiefoto? Blijft het consistent in latere scènes?
- Waarom is ons referentielogo veranderd in "notobochech"?
- Waarom is het gevraagde "over-de-schouder" camerastandpunt niet opgenomen?
- Waarom blijft de editor de hele tijd in een microfoon praten?
Voor filmmakers maakt dit het moeilijk om de exacte camerahoeken en opstellingen te krijgen die zij beschrijven.
We tweakten onze prompt, maar hoe meer details we toevoegden, hoe meer problemen er opdoken. Nu was het kapsel correct, maar plotseling waren er twee redacteuren in beeld. Toen liep onze redacteur dwars door een bureau heen.
De AI had ook moeite met het plaatsen van voorgrond. En ondanks herhaalde aanwijzingen produceerde het nooit de gevraagde over-de-schouder opname. Kortom, onze tekstinvoer werd niet nauwkeurig opgevolgd.
Beeld naar video
We zetten ons ambitieuze idee voor een korte film opzij en probeerden Image-to-Video en overgangen tussen twee referentiebeelden.
e eerste werkte redelijk goed. Onze afbeelding van Illidan (uit *Warcraft 3*) werd bijvoorbeeld omgezet in een korte clip. De camera zoomde in op het gezicht van de demonenjager terwijl hij fronste. Vanwege copyright zullen we de afbeelding of video hier niet laten zien.
Tot slot hebben we een overgang tussen twee frames getest:
- Illidan staat op een rots.
- Illidan landt op de grond.
Het idee: Illidan moet van de rots springen (afbeelding 1) en op de grond landen (afbeelding 2). Maar in de gegenereerde video veranderde Illidan tussendoor in een zwarte, vogelachtige schaduw. Volledig onbruikbaar.
Samenvatting
Video's maken met Vidu.com is doodeenvoudig. Maar de exacte scènes, camerahoeken en acties krijgen die u wilt, is allesbehalve eenvoudig. Aanwijzingen worden niet nauwgezet opgevolgd, referentiebeelden worden vervormd (logo, kapsel), objecten verliezen fysieke consistentie (lopen door een bureau), of er treden andere fouten op (dubbele editor).
Al met al is het een beetje frustrerend en maakt het het momenteel bijna onmogelijk om echt consistente video's te maken die zijn afgestemd op uw visie.
