Mapping the Design Space of User Experience for Computer Use Agents
基于大型语言模型 (LLM) 的计算机使用代理通过与可用的 UI 元素交互来执行用户命令，但对于用户希望如何与这些代理交互或哪些设计因素对其用户体验 (UX) 至关重要，人们知之甚少。我们进行了一项两阶段的研究来绘制计算机使用代理的用户体验设计空间。在第一阶段，我们审查了现有系统，以制定用户体验考虑因素的分类法，然后通过采访八位用户体验和人工智能从业者来完善它。由此产生的分类法包括用户提示、可解释性、用户控制和用户……等类别。
前端开发人员通过参数化视觉和行为属性来编写可广泛重用的 UI 组件。虽然很灵活，但这使得实例化变得更加困难，因为开发人员必须推理大量的属性值和交互。在实践中，他们必须探索组件的大设计空间，并为属性提供现实和自然的价值。为了解决这个问题，我们引入了显着的变化：既模仿又独特的变化。我们将区分变异的生成框架为设计空间采样，结合符号推理来识别视觉上重要的......
