Amazon Prime Video introduceert AI-lip-sync voor dubbing

Amazon Prime Video lanceert een AI-gestuurde functie die de lipbewegingen van acteurs synchroniseert met ‘human-dubbed’ audio.

De techniek is voorlopig alleen beschikbaar voor de Engelse versie van de Duitse serie Maxton Hall, maar Amazon geeft aan de functionaliteit later uit te breiden naar andere titels.

Volgens de aanbieder combineert het systeem AI-algoritmen met visuele-effecttechnologie om de mondbewegingen nauwkeurig te laten overeenkomen met de vertaalde dialoog.

Deze aanpak maakt het dubbingsproces efficiënter en verbetert de kijkervaring. Meta en YouTube hebben recent vergelijkbare auto-dubbingopties gepresenteerd, waarbij creators een ‘lip-sync’-knop kunnen activeren om hun video te laten lijken alsof ze in een andere taal spreken.

Met de Prime-Video-feature richt Amazon zich specifiek op het aanbieden van een professionele dubbing-ervaring voor zijn catalogus, in plaats van een creator-gerichte oplossing. De technologie belooft een nauwkeuriger resultaat dan conventionele synchronisatiemethoden, hoewel details over de onderliggende modellen niet openbaar zijn, meer details staan op de pagina van The Verge.