Nieuw model voor het genereren van PixVerse R1-video's biedt live-invoer en onderwerpprioriteit
Het genereren van tekst-naar-video heeft de afgelopen jaren ongetwijfeld enorme sprongen gemaakt in mogelijkheden, en hoewel dit de kwaliteit en de natuurgetrouwheid van video heeft verbeterd, is de verhalende functie van wat video vertegenwoordigt grotendeels over het hoofd gezien. Dit is waar PixVerse voor een nieuwe aanpak kiest. Naast het genereren van AI-video's van hogere kwaliteit, legt het platform de nadruk op het zo consistent mogelijk houden van het onderwerp van de video in de gegenereerde clips, zodat gebruikers zich kunnen richten op het regisseren van personagebewegingen en het vaststellen van verhalende concepten. Ook berekent het PixVerse-platform het aantal tokens dat nodig is om die specifieke video te genereren, om het risico aan te pakken dat een gebruiker loopt wanneer hij een video wil genereren. Met functies als deze richt PixVerse zich op zowel beginners als professionals.
Hoewel dit ambitieus is, zijn er nog een paar valkuilen die in de praktijk moeten worden aangepakt, evenals het doel van AI-gegenereerde video. Een van de voorbeelden in de presentatie was het genereren van een video van een auto-ongeluk waarbij een taxi onder water ging, een gebeurtenis die te gevaarlijk zou zijn voor een mens om te filmen. Dit soort scènes is ideaal voor het genereren van effecten om de hoge kosten van het filmen te vermijden, maar het is een eeuwige strijd om de fysica van de echte wereld na te bootsen. Omdat het platform drie niveaus van mogelijkheden biedt, moeten gebruikers nog steeds door het modelselectieproces navigeren. Van deze modellen is de R1 echter verreweg het meest ambitieuze aanbod, met realtime videogeneratie op basis van live aanwijzingen van gebruikers. Door informatie van meerdere gebruikers tegelijkertijd te verzamelen, gebruikt het R1-model de context van elke seconde video om de karakterfocus van PixVerses te behouden terwijl het verzoeken van gebruikers integreert. In de demo waren de resultaten onsamenhangend, maar er is potentieel voor echte samenwerking als een team op één lijn zit.
Tot slot is PixVerse agressief met zijn prijsstrategie, dus gebruikers kunnen het platform op zijn minst zonder al te veel investeringen uitproberen. Nieuwsgierige gebruikers kunnen meer informatie vinden in de onderstaande bronnen.
Bron(nen)
Add as a preferred source on Google
