Adobe afslørede et imponerende AI-assisteret videoskaleringsprojekt

Adobe

Adobes forskere har udviklet en ny generativ kunstig intelligens-model, VideoGigaGAN, som kan skalere sløret video op til otte gange den oprindelige opløsning.

Her er, hvad vi ved

Adobe hævder, at VideoGigaGAN overgår andre opskaleringsmetoder til Video Super Resolution (VSR) og leverer mere detaljerede resultater uden uønskede AI-inducerede artefakter.

Traditionelt er generative adversarial networks (GAN'er) effektive til at skalere stillbilleder til høj opløsning. Men de har problemer med video, hvor de skaber flimmer og andre fejl. Alternative metoder undgår dette, men giver ikke samme høje kvalitet.

VideoGigaGAN sigter mod at kombinere de bedste aspekter - GAN-resultater af høj kvalitet med minimale problemer med artefakter i outputbillederne. Adobe har givet flere eksempler på, hvordan teknologien fungerer.

Dopis vid @luokai

Genbesøg af tråde

Nogle fine detaljer i demovideoen, som f.eks. hudtekstur og folder, ser ud til at være fuldt genereret, men generelt ser resultaterne naturlige ud. Det er svært at sige, om opløsningen er forbedret med generativ AI, hvilket rejser spørgsmål om foto- og videoindholdets natur.

Indtil videre er VideoGigaGAN fortsat et forskningsprojekt, og det er uvist, om Adobe vil indarbejde teknologien i sine produkter som Premiere Pro. Tidligere har virksomheden annonceret et andet diffusionsbaseret eksperiment med opløsningsforbedring, Project Res-Up.

Kilde: The Verge: The Verge