Vi presenterar en förlängning till Tacotron talsyntes arkitektur som lär sig en latent inbäddning utrymme prosody, härledd från en referens akustisk representation som innehåller den önskade prosody. Vi visar att konditionering Tacotron på detta inbäddade utrymme resulterar i syntetiserat ljud som matchar prosody av referenssignalen med fin tid detalj även när referens-och synteshögtalare är olika. Dessutom visar vi att en referensprosody inbäddning kan användas för att syntetisera text som skiljer sig från referensuttalandet. Vi definierar flera kvantitativa och subjektiva mått för att utvärdera prosody överföring, och rapportera resultat med medföljande ljudprover från entaltalare och 44-talare Tacotron modeller på en prosody överföring uppgift.
Som tidigare nämnts introducerar REF den referens som används i detta arbete och visar att den kan användas för att överföra prosody från en referenssignal.
Towards End-to-End Prosody Transfer for Expressive Speech Synthesis with Tacotron
{'venue': 'ArXiv', 'journal': 'ArXiv', 'mag_field_of_study': ['Computer Science', 'Engineering']}