I detta dokument presenterar vi resultaten av att jämföra en statistisk tagger för tyska baserat på beslutsträd och en regelbaserad Brill-Tagger för tyska. Vi använde samma träningskorpus (och därmed samma tag-set) för att träna båda taggarna. Vi applicerade sedan taggarna på samma test corpus och jämförde deras respektive beteende och i synnerhet deras felfrekvenser. Båda taggarna presterar på samma sätt med en felfrekvens på cirka 5%. Av den detaljerade felanalysen kan man se att den regelbaserade taggern har fler problem med okända ord än den statistiska taggern. Men resultaten är motsatta för tecken som är många gånger tvetydiga. Om de okända orden matas in i taggarna med hjälp av en extern lexikon (t.ex. Gertwol-systemet) sjunker felfrekvensen för den regelbaserade taggern till 4,7 %, och respektive siffra för de statistiska taggarna sjunker till cirka 3,7 %. Att kombinera taggarna genom att använda utdata från en tagger för att hjälpa den andra ledde inte till någon ytterligare förbättring. I diesem Beitrag beschreiben wir die Resultate aus unserem Vergleich eines statistischen Taggers, der auf Entscheidungsbäumen basiert, und eines regel-basierten Brill-Taggers für das Deutsche. Beim Vergleich benutzten wir dasselbe Trainingskorpus (und damit dasselbe Taggaret), um beide Tagger zu traineren. Danach wurden beide Tagger auf dasselbe Testkorpus angewendet und ihr jeweiliges Verhalten und ihre Fehlerraten verglichen. Beide Tagger liegen ungefähr bei 5% Fehlerrate. Bei der detaljerten Fehleranalyse sieht man, dass der regelbasierte Tagger grössere Probleme bei unbekannten Wortformen hatt als der statistische Tagger. Bei vielfach ambigen Wortformen ist das Ergebnis jedoch umgekehrt. Wenn man dör unbekannten Wortformen mit Hilfe eines externen Lexikons (z.B. mit dem Gertwol-System) reduziert, die Fehlerrate des regel-basierten Taggar auf 4,7% und die entsprechende Rate des statistischen Taggars auf 3,7%. Eine Kombination der Tagger, der Output des einen als Hilfestellung für den anderen, brachte keine weitere Verbesserung.
Schneider m.fl. REF pekar på prestandaförlusten på okända ord, av en regelbaserad tagger jämfört med en statistisk tagger.
Comparing a statistical and a rule-based tagger for German
{'venue': 'ArXiv', 'journal': None, 'mag_field_of_study': ['Computer Science']}