Många öppen domän frågor svarssystem svara på frågor genom att först skörda ett stort antal kandidat svar, och sedan plocka den mest lovande en från listan. Ett kriterium för detta svar urval är typ kontroll: avgöra om den sökande svar är av semantisk typ förväntas av frågan. Vi definierar en allmän strategi för att bygga redundansbaserade typkontroller, uppbyggd kring begreppen jämförelseuppsättning och scoring metod, där den förra ger en uppsättning potentiella svar typer och den senare är avsedda att fånga förhållandet mellan en kandidat svar och en svarstyp. Vårt fokus ligger på poängsättningsmetoder. Vi diskuterar 9 sådana metoder, ger en detaljerad experimentell jämförelse och analys av dessa metoder, och finner att den bäst presterande poängmetoden fungerar på samma nivå som kunskapsintensiva metoder, även om våra experiment inte avslöjar ett tydligt svar på frågan om någon av de poängsättningsmetoder vi anser bör föredras framför de andra.
Olika poängsättningsmetoder används för att fånga relationen mellan ett kandidatsvar och en svarstyp REF.
Data-driven Type Checking in Open Domain Question Answering
{'venue': 'J. Appl. Log.', 'journal': 'J. Appl. Log.', 'mag_field_of_study': ['Mathematics', 'Computer Science']}