De introductie van Sora: een tekst-naar-video generator van OpenAI

De makers achter ChatGPT, OpenAI, hebben een tekst-naar-video-generator geïntroduceerd genaamd “Sora”. Deze nieuwe tekst-naar-video-generator kan opmerkelijk realistisch ogende video’s produceren op basis van tekst door middel van AI.

Het model maakt deel uit van een OpenAI-onderzoeksproject dat tot doel heeft kunstmatige intelligentie in staat te stellen de fysieke wereld en haar bewegingen te begrijpen en na te bootsen. Zo kun je video’s van maximaal één minuut lang genereren en streeft dit model naar hoge visuele kwaliteit en nauwkeurige uitvoering van de instructies van de gebruiker.

Schrijf je in voor de gratis nieuwsbrief:

De voorbeeldvideo’s gepresenteerd door OpenAI bestrijken een breed scala: van een wandeling door een neon-verlichte straat in Tokio tot wollige mammoeten in een besneeuwd landschap en creatieve voorstellingen zoals een jonge man die op een wolk zit en een boek leest. Volgens OpenAI zijn alle voorbeeldvideo’s rechtstreeks door Sora gegenereerd zonder enige modificaties.

Ondanks de vaak overtuigende resultaten op het eerste gezicht heeft Sora volgens OpenAI ook zwakke punten. Het model heeft bijvoorbeeld moeite met het nauwkeurig simuleren van de fysica van complexe scènes of het begrijpen van het onderscheid tussen oorzaak en gevolg.

OpenAI heeft in eerste instantie alleen specifieke groepen, waaronder experts op het gebied van beveiligingsevaluaties en creatieve professionals, toegang gegeven tot Sora. Dit om het model te testen in verschillende contexten en het verder te ontwikkelen voor een breder publiek.

OpenAI neemt veiligheidsmaatregelen om het risico van misbruik te minimaliseren. Dit omvat de ontwikkeling van detectietechnologieën voor gegenereerde inhoud en de integratie van beschermende maatregelen, zoals C2PA-metadata, in toekomstige producten.

Het model gebruikt de Diffusion Model-technologie en de Transformer-architectuur om video’s te genereren op basis van inzichten uit kleine gegevenspakketten, vergelijkbaar met de aanpak van het recentelijk door Google geïntroduceerde “Lumiere”. OpenAI beschouwt Sora als een verdere belangrijke stap op weg naar algemene kunstmatige intelligentie voor een breed publiek.

Schrijf je in voor de gratis nieuwsbrief: