Deep learning based natural language processing modell är bevisad kraftfull, men behöver storskalig datauppsättning. På grund av den stora klyftan mellan de verkliga uppgifterna och befintliga kinesiska corpus, introducerar vi i detta dokument en storskalig corpus av informella kinesiska. Denna corpus innehåller omkring 37 miljoner bokrecensioner och 50 000 netizens kommentarer till nyheterna. Vi utforskar de informella orden frekvenser av corpus och visar skillnaden mellan våra corpus och de befintliga. Korpus kan ytterligare användas för att träna djupinlärning baserade naturliga språk bearbetning uppgifter som kinesisk ord segmentering, känsloanalys.
Ref föreslog en storskalig informell kinesisk korpus.
LSICC: A Large Scale Informal Chinese Corpus
{'venue': 'ArXiv', 'journal': 'ArXiv', 'mag_field_of_study': ['Computer Science']}