Över 800 språk talas över hela Västafrika. Trots den uppenbara mångfalden bland människor som talar dessa språk, förenar ett språk dem alla - Västafrikanska Pidgin engelska. Det finns minst 80 miljoner talare av västafrikanska Pidgin engelska. Det finns dock inget känt naturligt språk bearbetning (NLP) arbete på detta språk. I detta arbete utför vi det första NLP-arbetet på den mest populära varianten av språket, vilket ger tre stora bidrag. För det första tillhandahållandet av en Pidgin corpus på över 56000 meningar, vilket är den största vi känner till. För det andra utbildning av den första tvärspråkiga inbäddningen mellan Pidgin och engelska. Detta anpassade inbäddning kommer att vara till hjälp vid utförandet av olika nedströms uppgifter mellan engelska och Pidgin. För det tredje, utbildningen av en Obesudlad Neural Machine Translation modell mellan Pidgin och engelska som uppnår BLEU poäng på 7,93 från Pidgin till engelska, och 5.18 från engelska till Pidgin. Sammantaget minskar detta arbete kraftigt inträdeshindret för framtida NLP-verk på västafrikanska Pidgin engelska.
Det enda kända naturliga språk bearbetning arbete som görs på någon variant av Pidgin engelska är genom REF.
PidginUNMT: Unsupervised Neural Machine Translation from West African Pidgin to English
{'venue': 'ArXiv', 'journal': 'ArXiv', 'mag_field_of_study': ['Computer Science']}