Human-AI collaboration in physical tasks
TL;DR：在 SmashLab，我们正在创建一个智能助手，它使用智能手表中的传感器来支持烹饪和 DIY 等物理任务。这篇博文探讨了我们如何使用与摄像头相比侵入性更低的场景理解来实现有用的、情境感知的交互，以便在日常生活中执行任务。想过让 AI 助手执行数字世界以外的任务吗？每天，我们都会执行许多任务，包括烹饪、手工制作和医疗自我护理（例如 COVID-19 自检试剂盒），这些任务涉及一系列离散步骤。准确执行所有步骤可能很困难；例如，当我们尝试一种新食谱时，我们可能会在任何步骤产生疑问，并且可能会因为跳过重要步骤或按错误顺序执行而犯错。这个项目，即传感模块的程序交互 (PrISM)，旨在通过基
