越来越多的推荐系统试图通过合并对话交互来增强整体用户体验。但是,从用户的角度评估对话推荐系统(CRS)仍然难以捉摸。基于GUI的系统评估标准可能不足以对话对应。本文介绍了我们提出的统一框架CRS-que,以评估CRS的用户体验。这个新的评估框架是基于Resque开发的,Resque是一个流行的以用户为中心的评估框架。此外,它还包括在二层(即,质量和用户信念)的两个维度下对话的用户体验指标(例如,理解,响应质量,人性)。遵循心理测量方法,我们通过在不同的情况下评估两个对话推荐系统来验证我们的框架:音乐探索和手机购买。两项研究的结果支持我们框架中结构的有效性和可靠性,并揭示了对话构造和建议结构如何相互作用和影响CRS的整体用户体验。我们认为,该框架可以帮助研究人员为对话推荐系统进行标准以用户为中心的研究,并为从业人员提供从用户的角度设计和评估CRS的见解。
主要关键词