Semantisk textlikhet (STS) försöker mäta graden av semantisk likvärdighet mellan två textslippar. Likhet uttrycks i en ordinal skala som sträcker sig från semantisk ekvivalens till fullständig orelateradhet. Mellanvärden fångar upp specifikt definierade nivåer av partiell likhet. Även om tidigare utvärderingar begränsade sig till bara enspråkiga textsnuttar, innehåller 2016 års gemensamma uppgift en deluppgift om beräkning av semantisk likhet på tvärspråkiga textsnuttar. Årets traditionella enspråkiga subtask handlar om utvärdering av engelska textsnuttar från följande fyra områden: Plagieringsdetektion, Post-Edited Machine Translations, Question-Answering och News Article Headlines. Från frågesvarsdomänen inkluderar vi både frågefråga och svarspar. Den flerspråkiga deluppgiften ger parade spanska engelska textsnuttar hämtade från samma källor som de engelska uppgifterna samt oberoende urval av nyhetsdata. Den engelska deluppgiften lockade 43 deltagande lag som producerade 119 systembidrag, medan den tvärspråkiga spanska-engelska deluppgiften lockade 10 lag som resulterade i 26 system.
Ansträngningar för att karakterisera graden av semantisk likvärdighet mellan två texter på samma eller olika språk presenteras REF.
SemEval-2016 Task 1: Semantic Textual Similarity, Monolingual and Cross-Lingual Evaluation
{'venue': 'SemEval@NAACL-HLT', 'journal': None, 'mag_field_of_study': ['Computer Science']}