Vi presenterar en ny metod för att upptäcka parallella meningar i jämförbar, icke-parallell corpora. Vi utbildar en maximal entropi klassificerare som, med tanke på ett par meningar, tillförlitligt kan avgöra om de är översättningar av varandra. Med hjälp av detta tillvägagångssätt extraherar vi parallella data från stora kinesiska, arabiska och engelska icke-parallella tidning corpora. Vi utvärderar kvaliteten på de extraherade uppgifterna genom att visa att det förbättrar prestandan hos ett toppmodernt statistiskt maskinöversättningssystem. Vi visar också att ett högkvalitativt MT-system kan byggas från grunden genom att börja med en mycket liten parallell corpus (100 000 ord) och utnyttja en stor icke-parallell corpus. Därför kan vår metod tillämpas med stor fördel för språkpar för vilka endast knappa resurser finns tillgängliga. - Vad är det för fel på dig?
Förutom gruvdrift från parallella dokument föreslog REF en metod för att upptäcka tvåspråkiga meningar i jämförbara corpora.
Improving Machine Translation Performance by Exploiting Non-Parallel Corpora
{'venue': 'Computational Linguistics', 'journal': 'Computational Linguistics', 'mag_field_of_study': ['Computer Science']}