I detta dokument föreslår vi en enhetlig ram för automatisk utvärdering av NLP-tillämpningar med hjälp av statistik över samtidig förekomst av N-gram. De automatiska utvärderingsmått som hittills föreslagits för maskinöversättning och automatisk sammanfattning är särskilda exempel från familjen av mätvärden som vi föreslår. Vi visar att olika medlemmar av samma familj av mätvärden bäst förklarar de variationer som erhålls med mänskliga utvärderingar, enligt den ansökan som utvärderas (Machine Translation, Automatic Summarization, och Automatic Question Answering) och de utvärderingsriktlinjer som används av människor för att utvärdera sådana tillämpningar.
Och i Ref. REF, beskriver de en ram genom att använda N-gram cooccurence statistik som en automatisk utvärdering av NLP-tillämpningar.
A Unified Framework For Automatic Evaluation Using N-Gram Co-Occurrence Statistics
{'venue': 'Annual Meeting Of The Association For Computational Linguistics', 'journal': None, 'mag_field_of_study': ['Computer Science']}