Förbättringar av kvaliteten, användbarheten och acceptansen hos talade dialogsystem kan underlättas genom bättre utvärderingsmetoder. För att stödja en tidig och effektiv utvärdering av dialogsystemen och deras komponenter presenteras i detta dokument en trepartsram som beskriver utvärderingsproblemet. En del modellerar beteendet hos användare och system under interaktionen, den andra det perception och dömande processer som äger rum inne i användaren, och den tredje delen modellerar vad som är viktigt för systemdesigners och tjänsteleverantörer. Papperet granskar tillgängliga metoder för vissa av modelldelarna, och visar hur förväntade förbättringar kan tjäna inte bara utvecklare och användare utan också forskare som arbetar med avancerade dialogfunktioner och funktioner.
Möller och Ward REF föreslog en trepartsram (behavare av användare och system under interaktionen, perception och bedömningsprocesser som äger rum inom användaren, och vad som är viktigt för systemdesigners och tjänsteleverantörer) för att beskriva utvärderingsproblemet i detalj.
A Framework for Model-based Evaluation of Spoken Dialog Systems
{'venue': 'Proceedings of the 9th SIGdial Workshop on Discourse and Dialogue', 'journal': None, 'mag_field_of_study': ['Computer Science']}