详细内容或原文请订阅后点击阅览
人机在体力任务中的协作
TL;DR：在 SmashLab，我们正在创建一个智能助手，它使用智能手表中的传感器来支持烹饪和 DIY 等物理任务。这篇博文探讨了我们如何使用与摄像头相比侵入性更低的场景理解来实现有用的、情境感知的交互，以便在日常生活中执行任务。想过让 AI 助手执行数字世界以外的任务吗？每天，我们都会执行许多任务，包括烹饪、手工制作和医疗自我护理（例如 COVID-19 自检试剂盒），这些任务涉及一系列离散步骤。准确执行所有步骤可能很困难；例如，当我们尝试一种新食谱时，我们可能会在任何步骤产生疑问，并且可能会因为跳过重要步骤或按错误顺序执行而犯错。这个项目，即传感模块的程序交互 (PrISM)，旨在通过基于对话的交互支持用户执行此类任务。通过使用摄像头等传感器、智能手表等可穿戴设备以及多普勒雷达等隐私保护环境传感器，助手可以推断用户的背景（他们在任务中正在做什么）并提供情境化的帮助。要实现类似人类的帮助，我们必须考虑很多事情：代理如何理解用户的背景？应该如何 [...]
来源:ΑΙhub