Denna forskning motiverades av vårt intresse för att förstå kriterierna för att mäta framgången för ett recommender-system ur användarnas synvinkel. Även om det befintliga arbetet har föreslagit ett brett spektrum av kriterier har de kombinerade kriteriernas överensstämmelse och giltighet inte prövats. I detta dokument beskriver vi en enhetlig utvärderingsram, ResQue (Recommender systems' Quality of user experience), som syftar till att mäta egenskaperna hos de rekommenderade objekten, systemets användbarhet, användbarhet, gränssnitt och interaktionsegenskaper, användarnas tillfredsställelse med systemen, och påverkan av dessa egenskaper på användarnas beteende intentioner, inklusive deras avsikt att köpa de produkter som rekommenderas till dem och återvända till systemet. Vi visar också resultaten av att tillämpa psykometriska metoder för att validera de kombinerade kriterierna med hjälp av data som samlats in från en stor användarundersökning. Resultaten av valideringen kan 1) stödja de valda kriteriernas överensstämmelse, giltighet och tillförlitlighet, och 2) förklara kvaliteten på användarupplevelsen och de viktigaste bestämningsfaktorerna som motiverar användarna att använda sig av den rekommenderade tekniken. Den slutliga modellen består av trettiotvå frågor och femton konstruktioner, som definierar de väsentliga egenskaperna hos ett effektivt och tillfredsställande rekommendationssystem, samt ger praktiker och forskare ett kostnadseffektivt sätt att utvärdera framgången med ett rekommendationssystem och identifiera viktiga områden där man kan investera utvecklingsresurser.
P.O. et al. REF beskriver en övergripande ram för att utvärdera de upplevda egenskaperna hos recommender-system i en modell som kallas ResQue (Recommender-systems kvalitet på användarupplevelsen).
A user-centric evaluation framework for recommender systems
{'venue': "RecSys '11", 'journal': None, 'mag_field_of_study': ['Computer Science']}