摘要。依赖一种具有单一交互模式的技术可能会使一些用户受益，但如果他们不愿意使用该模式，肯定会排除更多用户。解决方案就是在交互系统的初始设计中包含多种模式，使其更能适应更多用户的需求。包括多种模式可以迅速增加需要接收用户命令流的交互对象的数量。如果用户需要在家庭自动化环境中与多个工件交互，则尤其如此。在本文中，我们介绍了正在进行的多模式家庭自动化系统项目的总体架构。该系统依赖于一个名为 Firebase 的基于 Web 的数据库来交换用户输入并向多个工件发出命令。用户输入是使用智能手机和配备网络摄像头的计算机获取的。它们捕捉用户的触觉输入、语音短语、眼神注视以及头部姿势特征，如倾斜和面部方向。我们能够在数据库和不同的输入采集接口之间实现可靠的数据传输。作为系统原型设计的第一步，我们能够控制使用 Unity3D 软件开发的两个独立游戏界面。