Ordet sense disambiguation syftar till att identifiera vilken betydelse av ett ord är närvarande i en given användning. Att samla ordförnimmelser är en mödosam och svår uppgift. Flera metoder har föreslagits för att samla in sense annotations med hjälp av ett stort antal otränade annoterare, med blandade resultat. Vi föreslår tre nya annoteringsmetoder för att samla ordförnimmelser där otränade annoterare tillåts använda flera etiketter och vikta sinnena. Våra resultat visar att outbildade arbetstagare, med tanke på den lämpliga noteringsuppgiften, kan uppnå minst lika hög enighet som annoterare i en kontrollerad miljö, och i aggregat generera lika bra som en sense labeling.
Mer nyligen, Ref 13 jämförde tre annoteringsmetoder för att samla ord sense labels på AMT.
Embracing Ambiguity: A Comparison of Annotation Methodologies for Crowdsourcing Word Sense Labels
{'venue': 'NAACL', 'journal': None, 'mag_field_of_study': ['Computer Science']}