Gemenskapsfrågor Svar (cQA) ger nya intressanta forskningsanvisningar till det traditionella frågesvaret (QA) fältet, t.ex. utnyttjandet av interaktionen mellan användare och strukturen på relaterade inlägg. I detta sammanhang organiserade vi SemEval-2015 Task 3 om svarsval i cQA, som inkluderade två deluppgifter: a) klassificera svar som bra, dåliga eller potentiellt relevanta med avseende på frågan, och b) svara på en JA/NO-fråga med ja, nej, eller osäker, baserat på listan över alla svar. Vi sätter subtask A för arabiska och engelska på två relativt olika cQA domäner, dvs Qatar Living hemsida för engelska, och en koran-relaterad webbplats för arabiska. Vi använde crowdsourcing på Amazon Mechanical Turk för att märka en stor engelsk träningsdatauppsättning, som vi släppte till forskarsamhället. Tretton lag deltog i utmaningen med totalt 61 bidrag: 24 primära och 37 kontrastiva. De bästa systemen uppnådde en officiell poäng (makro-genomsnitt F 1 ) på 57.19 och 63.7 för de engelska subtask A och B, och 78.55 för den arabiska subtask A.
Den SemEval-2015 Uppgift 3, Svar Urval i gemenskapsfråga Svar, som syftar till att klassificera kommentarer i en tråd som relevant, potentiellt användbar, eller dålig, om trådfrågan REF.
SemEval-2015 Task 3: Answer Selection in Community Question Answering
{'venue': 'SemEval-2015', 'journal': None, 'mag_field_of_study': ['Computer Science']}