I detta papper presenterar vi ett förhållningssätt till flerspråkig bildbeskrivning som sammanför insikter från neural maskinöversättning och neural bildbeskrivning. För att skapa en beskrivning av en bild för ett visst målspråk, våra sekvensgenerering modeller villkor på funktion vektorer från bilden, beskrivningen från källspråket, och / eller en multimodal vektor som beräknas över bilden och en beskrivning i källspråket. I bildbeskrivningsexperiment på datauppsättningen IAPR-TC12 av bilder i linje med engelska och tyska meningar, finner vi betydande och betydande förbättringar i BLEU4 och Meteorpoäng för modeller som utbildats över flera språk, jämfört med en enspråkig baslinje.
REF visade ett sätt att hantera flerspråkig bildbeskrivning som förenar delar av kunskap från neural maskinöversättning och neural bildtextering.
Multi-Language Image Description with Neural Sequence Models
{'venue': 'ArXiv', 'journal': 'ArXiv', 'mag_field_of_study': ['Computer Science']}