I detta dokument studeras hur parafraser påverkar den automatiska utvärderingens riktighet. Med tanke på en referensmening och en maskingenererad mening försöker vi hitta en parafras av referensmeningen som är närmare i ordalydelsen till maskinens utgång än den ursprungliga referensen. Vi tillämpar vår parafraseringsmetod i samband med maskinöversättningsutvärdering. Våra experiment visar att användningen av en parafraserad syntetisk referens förfinar exaktheten i automatisk utvärdering. Vi fann också ett starkt samband mellan kvaliteten på automatiska parafraser som bedöms av människor och deras bidrag till automatisk utvärdering.
REF använde parafraser av referensöversättningarna för att förbättra den automatiska MT-utvärderingen.
Paraphrasing For Automatic Evaluation
{'venue': 'Human Language Technology Conference And Meeting Of The North American Association For Computational Linguistics', 'journal': None, 'mag_field_of_study': ['Computer Science']}