OpenAI afslørede Sora, en AI-model til konvertering af tekst til video
OpenAI
OpenAI har annonceret en ny videogenereringsmodel kaldet Sora, som kan skabe realistiske og fantasifulde videoer på op til et minut ud fra en tekstbeskrivelse.
Her er, hvad vi ved
Ifølge OpenAI skaber Sora komplekse scener med flere figurer ved præcist at placere objekter og karakterer i billedet. Modellen er også i stand til at generere forskellige typer bevægelser.
Vi præsenterer Sora, vores tekst-til-video-model.
- OpenAI (@OpenAI) 15. februar 2024
Sora kan skabe videoer på op til 60 sekunder med meget detaljerede scener, komplekse kamerabevægelser og flere karakterer med levende følelser. https://t.co/7j2JN27M3W
Prompt: "Smuk, snedækket... pic.twitter.com/ruTEWn87vf
Udviklerne bemærkede AI'ens evne til at detaljere baggrunde, individuelle objekter og karakterer. Desuden kan den generere karakteransigter med farverige og varierede følelser.
Opfordring: "En filmtrailer med den 30-årige rummands eventyr iført en rød strikket motorcykelhjelm af uld, blå himmel, saltørken, filmisk stil, optaget på 35 mm film, levende farver." pic.twitter.com/0JzpwPUGPB
- OpenAI (@OpenAI) 15. februar 2024
Opfordring: "Flere gigantiske uldne mammutter nærmer sig på vej gennem en snedækket eng, deres lange uldne pels blæser let i vinden, mens de går, snedækkede træer og dramatiske snedækkede bjerge i det fjerne, midt på eftermiddagen lys med spredte skyer og en sol højt i det fjerne ... pic.twitter.com/Um5CWI18nS
- OpenAI (@OpenAI) 15. februar 2024
OpenAI hævder, at deres model har en vis "forståelse" af de fysiske love i den virkelige verden. Der er dog nogle gange problemer med at skabe komplekse scener og årsag-virkning-forhold.
Ud over at syntetisere videoer fra bunden kan Sora forfine og udvide eksisterende videoer. Den er i stand til at udfylde manglende billeder i en billedsekvens.
Sora er i øjeblikket kun tilgængelig for "red teamers", som evaluerer modellen for potentielle skader og risici. OpenAI har også åbnet op for adgang til nogle visuelle kunstnere, designere og filmskabere for at få feedback.
Kilde: OpenAI: OpenAI