Fugatto: NVIDIA afslører kraftfuldt generativt videoværktøj

NVIDIA har introduceret Fugatto (Foundational Generative Audio Transformer Opus 1), en universel generativ AI-model, der er i stand til at skabe og omdanne musik, stemmer og lyde baseret på tekst- eller lydanmodninger. Virksomheden kaldte udviklingen for en "schweizerkniv til lyd".

Her er, hvad vi ved

Fugatto er unik, fordi den kombinerer de funktioner, der tidligere blev udført af separate modeller. Den er i stand til at udføre komplekse opgaver som f.eks:

• Generere musik ud fra tekst: Modellen kan f.eks. skabe en "melankolsk klaverkomposition med en let jazzrytme".
• Transformation af lyd: Du kan ændre instrumentet i en sang, f.eks. forvandle en guitar til en cello eller tilføje trommer til en eksisterende melodi.
• Modifikation af stemme: Modellen kan justere den følelsesmæssige tone i din stemme eller endda ændre dens accenter.
• En særlig funktion ved Fugatto er evnen til at syntetisere lyde, som endnu ikke har eksisteret. Den kan f.eks. skabe en unik lyd, der passer til en bestemt film eller et bestemt spil.

Hvorfor det er vigtigt

NVIDIA's udvikling sætter nye standarder for generativ AI inden for lyd. Med Fugatto får kreative fagfolk et værktøj, der ikke kun automatiserer rutineprocesser, men også giver uendelige muligheder for kreativitet. Fugattos evne til at tilpasse sig mange scenarier betyder, at modellen i fremtiden kan finde anvendelse inden for områder, hvor lyd er afgørende, fra reklamer til uddannelsesprogrammer.

Denne teknologi bekræfter også tendensen til, at AI-modeller bevæger sig i retning af multitasking. Tidligere var det nødvendigt med separate modeller til forskellige opgaver, men nu viser Fugatto, at multifunktionelle løsninger ikke kun er mulige, men også effektive.

Hvad ligger der bag ordet Fugatto?

Det kommer naturligvis af ordet "fuga". En fuga er en musikalsk form og kompositionsteknik, der er kendetegnet ved en polyfonisk struktur, hvor et eller flere temaer (melodier) gentages og udvikles i forskellige stemmer. Udtrykket stammer fra det latinske ord fuga, som betyder "løb" eller "flugt", hvilket afspejler ideen om, at et tema "løber" fra en stemme til en anden. Fugaen blev en central genre i barokmusikken, især takket være komponister som Johann Sebastian Bach, der betragtes som en af de største mestre inden for denne genre.

Ordet "fugatto" (italiensk: fugato) betyder en polyfon musikalsk form, som er beslægtet med fugaen. Fugatto opstod i værker med streng stil og omfatter en imitationsteknik, hvor et eller flere temaer gentages og udvikles i forskellige stemmer.

Kilde: blogs.nvidia.com