超声波的

celip：基于超声波的唇读，带有通道估计方法的虚拟现实系统

我们为虚拟现实（VR）开发了基于超声波的无声语音界面。提出越来越多的定制设备来增强VR的沉浸和体验，我们的系统可用于提高用户与系统之间的交互能力，同时保留使用各种CUS tomized设备并避免传统语音识别的局限性的可能性。通过使用超声波的频道估计技术，我们可以得出用户嘴唇的运动特征，这些动作特征可用于微调现有的语音识别模型，并通过大量的开源语音数据集进行增强。更重要的是，我们使用语音界面来指导新用户的CUS tomized模型的初始化，以便他们可以轻松地访问我们的系统。已经进行了两阶段的实验，结果表明我们的系统可以达到90。8％命令级准确性和1。句子级准确性中的3％单词误差。