Utvärderingen av hela sentenssemantiska strukturer spelar en viktig roll för semantisk tolkning och storskalig semantisk strukturanmärkning. Det finns dock ingen allmänt använd mätmetod för att utvärdera helhetssemantiska strukturer. I detta dokument presenterar vi smatch, ett mått som beräknar graden av överlappning mellan två semantiska funktionsstrukturer. Vi ger en effektiv algoritm för att beräkna metriska och visa resultaten av en inter-annotator överenskommelse studie.
Cai och Knight REF utvecklade en metrisk smatch som beräknar graden av överlappning mellan två AMR-strukturer.
Smatch: an Evaluation Metric for Semantic Feature Structures
{'venue': 'ACL', 'journal': None, 'mag_field_of_study': ['Computer Science']}