Adobe MultiFoley

Adobe Research heeft in samenwerking met de Universiteit van Michigan MultiFoley ontwikkeld, een geavanceerd AI-systeem dat automatisch geluiden genereert voor video's. Het systeem kan geluidseffecten creëren op basis van tekstinstructies, referentie-audio of videovoorbeelden en synchroniseert deze nauwkeurig met de beelden.

MultiFoley onderscheidt zich door zijn vermogen om hoogwaardige audio met een volledige bandbreedte van 48 kHz te produceren. Dit is mogelijk dankzij een training op een mix van internetvideo's en professionele geluidseffectbibliotheken. In tests presteerde het model beter dan bestaande systemen in audio-videosynchronisatie en semantische overeenstemming, met een gemiddelde precisie van 0,8 seconden.

Hoewel het nog niet duidelijk is of Adobe MultiFoley zal integreren in producten zoals Premiere Pro, biedt de technologie veelbelovende mogelijkheden. Het zou een krachtige tool kunnen worden voor zowel individuele contentmakers als productiebedrijven die efficiënt en professioneel geluidsontwerp willen toepassen.

Lees hier het volledige artikel (met een video!) op 'The Decoder'.