Sammanfattning Denna artikel föreslår att syntetisera uttrycksfulla huvud- och ansiktsgester på talande avatar med hjälp av de tredimensionella njutnings-displeasure, upphetsande-nonarousal och dominanssubmissiveness (PAD) deskriptorer av semantisk expressivitet. PAD-modellen används för att överbrygga klyftan mellan textsemantik och visuella rörelseegenskaper med tre dimensioner av njutningsbegär, upphetsande-icke-upphetsande och dominans-undergivenhet. Baserat på korrelationsanalysen mellan PAD-anteckningar och rörelsemönster som härrör från huvud- och ansiktsrörelsedatabasen, föreslår vi att bygga en explicit kartläggning från PAD-deskriptorer till ansiktsanimeringsparametrar med linjär regression och neurala nätverk för huvudrörelse respektive ansiktsuttryck. En PAD-driven talande avatar i text-till-visuell-tal system genomförs genom att generera uttrycksfulla huvudrörelser på prosodisk ordnivå baserat på (P, A) deskriptorer av lexical bedömning, och ansiktsuttryck på meningsnivå enligt PAD deskriptorer av emotionell information. En serie av PAD omvänd utvärdering och jämförande perceptuella experiment visar att huvud- och ansiktsgester syntetiserade baserat på PAD-modellen avsevärt kan förbättra den visuella expressiviteten av talande avatar.
REF syntetiserade huvudet och ansiktet gester av ett talande medel med känslomässiga uttryck.
Head and facial gestures synthesis using PAD model for an expressive talking avatar
{'venue': 'Multimedia Tools and Applications', 'journal': 'Multimedia Tools and Applications', 'mag_field_of_study': ['Computer Science']}