I semantisk textlikhet (STS) graderar systemen graden av semantisk ekvivalens, på en graderad skala från 0 till 5, där 5 är den mest likartade. I år har vi satt upp två uppgifter: (i) en kärnuppgift (CORE) och (ii) en typad liknande uppgift (TYPED). Core är liknande i konfigurerat till SemEval STS 2012 uppgift med par av meningar från källor relaterade till 2012, men skiljer sig i genre från 2012 set, nämligen, i år vi inkluderade newswire rubriker, maskinöversättning utvärdering dataset och flera lexical resursblossade uppsättningar. TYPD, å andra sidan, är ny och försöker karakterisera varför två objekt anses vara liknande, med hjälp av kulturarvsobjekt som beskrivs med metadata såsom titel, författare eller beskrivning. Flera typer av likheter har definierats, inklusive liknande författare, liknande tidsperiod eller liknande plats. Anteckningen för båda uppgifterna utnyttjar crowdsourcing, med relativt hög interannotator korrelation, från 62 % till 87 %. CORE-uppgiften lockade 34 deltagare med 89 körningar, och TYPD-uppgiften lockade 6 lag med 14 körningar.
Textual Semantisk Likhet är uppgiften att mäta graden av semantisk likhet mellan två texter, vanligen på en graderad skala från 0 till 5, där 5 är den mest likartade REF och betyder att texterna är parafraser.
*SEM 2013 shared task: Semantic Textual Similarity
{'venue': '*SEM', 'journal': None, 'mag_field_of_study': ['Computer Science']}