TUSUR 正在开发针对静音者的音频助手

托木斯克国立控制系统和无线电电子大学的一群学生正在开发一种设备,可以将手语“翻译”成文字并发出声音。

来源:Robogeek新闻频道(关于机器人技术的俄罗斯与世界新闻)

托木斯克国立控制系统和无线电电子大学的一群学生正在开发一种设备,可以将手语“翻译”成文字并发出声音。

为了解决这个问题,年轻科学家计划创建一个音频助手,由两个主要组件组成:特殊手套和将安装在移动设备上的软件。

该项目的大部分工作将用于制作手套本身。计划它们将配备弯曲传感器、蓝牙模块、控制器和扬声器。当一个人开始说手语时,弯曲传感​​器和加速度计将记录他的手指和手的位置,该信息首先由一只手的控制器读取,并使用蓝牙模块传输到第二只手上更强大的控制器,来自双手传感器的信息将同步。接下来,有关人手和手指运动的完整信息将通过另一个蓝牙模块发送到智能手机,其中一个特殊程序将“读取”手势并将其翻译成文字。最后阶段将通过安装在手套上的扬声器对接收到的数据进行画外音。

同时,学生不仅需要创建一个可以工作的设备,还要确保音频助手真正方便静音者。因此,除了创建能够处理和识别手势的程序、同步所有传感器等主要问题外,还需要寻找其他问题的解决方案。例如,如何将所有设备装在两只手上而不使手套变得太笨重。

目前,开发人员正处于该项目的初始阶段。最近,第一批必要的设备——蓝牙模块——向学生提供了。下一批是弯曲传感器。这是一种尺寸为 5 至 10 厘米的复杂设备,用于飞机工业,借助它可以确定飞机机翼的变形程度。