Den gemensamma uppgiften CoNLL-2012 innebar att förutsäga coreferens på engelska, kinesiska och arabiska, med hjälp av den slutliga versionen, v5.0, av OntoNotes corpus. Det var en uppföljning till den engelska enda uppgiften som organiserades 2011. Fram till inrättandet av OntoNotes corpus var resurserna inom detta underområde för språkbehandling begränsade till subfrasen samreferens, ofta på en begränsad uppsättning enheter, såsom ACE-enheter. OntoNotes ger en storskalig corpus av allmän anaphoric coreferens inte begränsad till substantiv fraser eller till en specificerad uppsättning av enhetstyper, och täcker flera språk. OntoNotes ger också ytterligare lager av integrerad annotering, fånga ytterligare ytlig semantisk struktur. I detta dokument beskrivs kommentaren OntoNotes (medreferens och andra skikt) och sedan parametrarna för den gemensamma uppgiften, inklusive format, förbehandlingsinformation, utvärderingskriterier, och presenterar och diskuterar de resultat som uppnåtts av de deltagande systemen. Samreferensuppgiften har haft en komplex utvärderingshistorik. Potentiellt många utvärderingsvillkor har tidigare gjort det svårt att bedöma förbättringen av nya algoritmer i förhållande till tidigare rapporterade resultat. Med en standard testuppsättning och standard utvärderingsparametrar, alla baserade på en resurs som ger flera integrerade annotering lager (syntaktiska parser, semantiska roller, ord sinnen, namngivna enheter och coreferens) och på flera språk kan stödja gemensam modellering och hjälpa mark och energi pågående forskning i uppgiften enhet och händelse coreferens.
Den gemensamma uppgiften CONLL 2012 REF var inriktad på samreferensresolution i en engelsk, kinesisk och arabisk flerspråkig miljö.
CoNLL-2012 Shared Task: Modeling Multilingual Unrestricted Coreference in OntoNotes
{'venue': 'Joint Conference on EMNLP and CoNLL - Shared Task', 'journal': None, 'mag_field_of_study': ['Computer Science']}