Ord och tecken-bigram används båda som funktioner i kinesisk text behandling uppgifter, men ingen systematisk jämförelse eller analys av deras värden som funktioner för kinesisk text kategorisering har rapporterats härför. Vi utför här en fullständig prestandajämförelse mellan dem genom experiment på olika dokumentsamlingar (inklusive en manuellt word-segmented corpus som en gyllene standard), och en semi-kvantitativ analys för att belysa egenskaperna hos deras beteende; och försöka ge några preliminära ledtrådar för funktionstermer val (i de flesta fall tecken-bigram är bättre än ord) och dimensionalitet inställning i text kategoriseringssystem.
REF gjorde en detaljerad jämförelse mellan ord och tecken-bigram när de används för att representera funktioner i textklassificering, och drog slutsatsen att kinesiska tecken bigrams är bättre än ord i funktionsrepresentation för textklassificering.
A Comparison And Semi-Quantitative Analysis Of Words And Character-Bigrams As Features In Chinese Text Categorization
{'venue': 'International Conference On Computational Linguistics And Annual Meeting Of The Association For Computational Linguistics', 'journal': None, 'mag_field_of_study': ['Computer Science']}