Kodmixning förekommer ofta i användargenererat innehåll på sociala medier, särskilt från flerspråkiga användare. Den språkliga komplexiteten i sådant innehåll förvärras av förekomst av stavningsvariationer, translitterering och icke-beroende av formell grammatik. Vi beskriver våra inledande insatser för att skapa en multi-level kommenterade corpus av hindi-engelsk kodblandad text collated från Facebook forum, och utforska språkidentifiering, back-translitteration, normalisering och POS taggning av denna data. Våra resultat visar att språkidentifiering och translitterering för hindi är två stora utmaningar som påverkar POS-märkningsnoggrannhet.
REF ) skapade multi-level kommenterade corpus av hindi-engelska kodblandad text från Facebook forum.
POS Tagging of English-Hindi Code-Mixed Social Media Content
{'venue': 'EMNLP', 'journal': None, 'mag_field_of_study': ['Computer Science']}