Vi presenterar en översikt över den första gemensamma uppgiften om språkidentifiering på kodade data. Den gemensamma uppgiften omfattade kodbytesdata från fyra språkpar: Modern Standard ArabicalDialectal Arabical (MSA-DA), MandarinEngelska (MAN-EN), Nepali-Engelska (NEP-EN) och Spanska-Engelska (SPA-EN). Totalt sju lag deltog i uppgiften och lämnade in 42 systemkörningar. Utvärderingen visade att det är svårare att identifiera språk på tokennivå när de aktuella språken är nära besläktade, som när det gäller MSA-DA, där förutsägelsen var den lägsta bland alla språkpar. Språkparen däremot med den högsta F-mätaren där SPA-EN och NEP-EN. Uppgiften visade tydligt att språkidentifiering i kodförmedlade data fortfarande är långt ifrån löst och kräver ytterligare forskning.
I den första delade uppgiften om språkidentifiering i CodeSwitched Data Ref, var en liten del av orden märkta som "blandade", vilket tyder på att dessa ord bestod av morphemes från olika språk.
Overview for the First Shared Task on Language Identification in Code-Switched Data
{'venue': 'CodeSwitch@EMNLP', 'journal': None, 'mag_field_of_study': ['Computer Science']}