I detta dokument presenteras uppgiftsdefinitionen, resurser, deltagande system och jämförande resultat för den gemensamma uppgiften om ordanpassning, som organiserades som en del av ACL 2005 Workshop on Building and Using Parallel Texts. Den gemensamma uppgiften omfattade Engelska-Inuktitut, Rumänska-Engelska, och Engelsk-Hindi sub-tasks, och drog deltagande av tio lag från hela världen med totalt 50 system. Uppgiften med ordanpassning består i att hitta korrespondenser mellan ord och fraser i parallella texter. Om man antar att en mening ligger i linje med en tvåspråkig corpus på språken L1 och L2, är uppgiften för ett orduppställningssystem att ange vilket ord i språk L1 som motsvarar vilket ord i språk L2 som används. Årets gemensamma uppgift följer på framgången med det tidigare ordet anpassning utvärdering som organiserades under HLT/NAACL 2003 workshop om "Bygga och använda parallella texter: Data Driven Machine Translation and Beyond" (Mihalcea och Pedersen, 2003). Den nuvarande utgåvan är dock tydlig eftersom den har fokus på språk med knappa resurser. De deltagande grupperna fick tränings- och testdata för tre språkpar, som svarade för olika nivåer av databrist: (1) Engelsk-Inuktitut (2 miljoner ord utbildningsdata), (2) Rumänsk-Engelsk (1 miljon ord) och (3) Engelsk-Hindi (60.000 ord). I likhet med den tidigare utvärderingen av ordanpassning och med de utvärderingar av maskinöversättningar som NIST anordnade definierades två olika deluppgifter: (1) Begränsade resurser, där systemen endast tilläts använda de resurser som tillhandahölls. (2) Obegränsade resurser, där systemen tilläts använda alla resurser utöver de som tillhandahölls. Sådana resurser måste uttryckligen nämnas i beskrivningen av systemet. Testdata släpptes en vecka före tidsfristen för inlämning av resultat. De deltagande lagen ombads att producera ordanpassningar, efter ett gemensamt format som anges nedan, och lämna in sin utdata inom en viss tidsfrist. Resultaten returnerades till varje lag inom tre dagar efter inlämnandet.
En delad uppgift om språk med glesa resurser beskrivs i REF.
Word Alignment For Languages With Scarce Resources
{'venue': 'Workshop On Building And Using Parallel Texts', 'journal': None, 'mag_field_of_study': ['Computer Science']}