Vi beskriver en ny teknik och implementerat system för att bygga ett delkategoriseringslexikon från textkorpora. Varje ordbok post kodar den relativa frekvensen av förekomsten av en omfattande uppsättning delkategorisering klasser för engelska. Ett första experiment, på ett prov av 14 verb som uppvisar flera kompletterande mönster, visar att tekniken uppnår noggrannhet jämförbar med tidigare metoder, som alla är begränsade till en mycket begränsad uppsättning delkategoriseringsklasser. Vi visar också att ett delkategoriseringslexikon byggt med systemet förbättrar noggrannheten hos en parser med en märkbar mängd 1. Predicera subkategorisering är en viktig komponent i en lexikal post, eftersom de flesta, om inte alla, senaste syntaktiska teorier "projekt" syntaktisk struktur från lexikonet. Därför måste en bred coverage parser som använder en sådan lexikalistisk grammatik ha tillgång till en exakt och omfattande ordbok kodning (minst) antalet och kategorin av en predikat argument och helst också information om kontroll med predikativa argument, semantiska urval preferenser på argument, och så vidare, för att möjliggöra återhämtning av den korrekta predikat-argument struktur. Om tolken använder statistiska tekniker för att rangordna analyser, är det också viktigt att lexikonet kodar den relativa frekvensen av distinkta subkategoriseringsklasser för varje predikat. 1Detta arbete stöddes av det brittiska projektet DTI/SALT 41/5808 "Integrerad språkdatabas", CEC Telematics Applications Programme project LE1-211i "SPARKLE: Shallow Parsing and Knowledge Extrahation for Language Engineering", och av SERC/EPSRC Advanced Fellowships till båda författarna. Vi vill tacka COMLEX Syntax utveckling team för att ge oss tillgång till pre-release data (för ett tidigt experiment), och för användbar feedback. Flera betydande maskinläsbara underkataloger finns för engelska, antingen byggdes till stor del automatiskt från maskinläsbara versioner av konventionella inlärda ordböcker, eller manuellt av (beräknings) lingvister (t.ex. Alvey NL Tools (ANLT) ordbok, Boguraev et al. (1987); COMLEX Syntax-lexikonet Grishman m.fl. (1994).............................................................................................................................. Tyvärr kan inget tillvägagångssätt ge en verkligt korrekt eller heltäckande beräkningslexikon, eftersom båda i slutändan vilar på lexikografers/lingvisters manuella ansträngningar och därför är benägna att fel av underlåtenhet och kommission som är svåra eller omöjliga att upptäcka automatiskt (t.ex. Boguraev & Briscoe, 1989; se även avsnitt 3.1 nedan som exempel). Dessutom är manuell kodning arbetsintensiv och därför är det kostsamt att utvidga den till neologism, information som för närvarande inte är kodad (t.ex. relativ frekvens av olika underkategorier) eller andra (under)språk. Dessa problem förvärras av det faktum att predikat subkategorisering är nära förknippat med lexisk känsla och sinnena av ett ordförändring mellan korpora, subspråk och/eller ämnesdomäner (Jensen, I ett nyligen utfört experiment med en bred coverage tolkningssystem som använder en lexicalist grammatical framework, Briscoe & Carroll (1993) konstaterade att hälften av parse misslyckanden på osynliga testdata orsakades av felaktig subkategorisering information i ANLT ordbok. Det nära sambandet mellan sinne och subkategorisering och mellan ämnesdomän och mening gör det sannolikt att ett fullständigt korrekt "statiskt" subkategoriseringslexikon för ett språk i vilket fall som helst är ouppnåeligt. Dessutom, även om Schabes (1992) och andra har föreslagit "lexikaliserad" probabilistisk grammatik för att förbättra noggrannheten i pars rankning, har ingen bred coverage parser ännu konstruerats som innehåller sannolikheter av olika subkategoriseringar för enskilda predikat, på grund av problemen med att exakt uppskatta dem. Dessa problem tyder på att automatisk konstruktion eller uppdatering av delkataloger från textkorpora är en mer lovande väg att gå. Preliminära experiment för att förvärva några 356
REF förfina BHT med en förhandsinformation om sannolikheterna för underkategorisering ram medlemskap och använda den för att filtrera de inducerade ramar.
Automatic Extraction Of Subcategorization From Corpora
{'venue': 'Applied Natural Language Processing Conference', 'journal': None, 'mag_field_of_study': ['Computer Science']}