I detta dokument beskrivs den första gemensamma uppgiften om Taxonomiextraktionsutvärdering som anordnades som en del av SemEval-2015. Deltagarna ombads att hitta hypernym-hyponym relationer mellan givna villkor. För var och en av de fyra utvalda måldomänerna gavs deltagarna två listor med domänspecifika termer: en WordNet-samling av termer och en välkänd terminologi som utvunnits ur en allmänt tillgänglig taxonomi på nätet. Totalt 45 taxonomier som lämnats in av sex deltagande grupper utvärderades med hjälp av standardiserade strukturåtgärder, den strukturella likheten med en guldstandard taxonomi och genom manuell kvalitetsbedömning av nya förbindelser som ingick i urvalet.
Slutligen införde REF den första gemensamma uppgiften att utvärdera taxonomiextraktion för att skapa en gemensam grund för utvärdering.
SemEval-2015 Task 17: Taxonomy Extraction Evaluation (TExEval)
{'venue': 'SemEval@NAACL-HLT', 'journal': None, 'mag_field_of_study': ['Computer Science']}