Vi presenterar två metoder för oövervakad segmentering av ord till morfemliknande enheter. Den modell som används är särskilt lämpad för språk med en rik morfologi, till exempel finska. Den första metoden är baserad på principen om minimibeskrivningslängd (MDL) och fungerar på nätet. I den andra metoden används maximal sannolikhetsoptimering (ML). Kvaliteten på segmenteringarna mäts med hjälp av en utvärderingsmetod som jämför de segmenteringar som produceras med en befintlig morfologisk analys. Experiment på både finska och engelska corpora visar att de metoder som presenteras fungerar bra jämfört med ett aktuellt toppmodernt system.
En sådan metod modeller segmentering genom minsta beskrivning längd princip REF.
Unsupervised Discovery Of Morphemes
{'venue': 'Workshop On Morphological And Phonological Learning', 'journal': None, 'mag_field_of_study': ['Computer Science']}