原型化 AI 用户体验具有挑战性，部分原因是概率 AI 模型使得在部署之前预测、测试和缓解 AI 故障变得困难。在这项工作中，我们着手为早期 AI 原型设计的从业者提供支持，重点关注基于自然语言 (NL) 的技术。我们对一家大型科技公司的 12 名 NL 从业者的采访表明，除了 AI 原型设计的挑战之外，由于缺乏工具和时间紧迫，原型设计通常根本不发生或仅关注理想化的场景。这些发现为我们设计 AI Playbook 提供了参考，AI Playbook 是一种交互式低成本工具，我们开发该工具是为了鼓励在部署之前主动和系统地考虑 AI 错误。我们对 AI Playbook 的评估表明，它有潜力 1) 鼓励产品团队优先考虑理想和故障场景，2) 从用户体验的角度标准化 AI 故障的表达，3) 充当用户体验设计师、数据科学家和工程师之间的边界对象。