摘要 — 如今,人工智能 (AI) 领域已对现实生活产生了重大影响。许多应用程序使用 AI 技术来帮助人们处理生活的各个方面。此外,随着全球视障人士数量的增加,需要此类 AI 辅助应用程序为他们提供独立的生活。迄今为止,开发的经济实惠且合适的解决方案有限。在本文中,我们介绍了一款名为 (Vivid) 的个人 AI 辅助应用程序,它支持视障人士更加独立。Vivid 具有许多功能,例如识别物体、物体的颜色、识别文本和人脸检测。它依赖于使用移动摄像头来感知环境,并使用机器学习技术来理解环境。Vivid 无需任何视觉能力,即可将有意义的信息转换为用户可听见的声音。此外,与用户的整个交互仅基于语音命令。用户的输入以平板电脑或手机触摸屏上的手指手势形式捕获。除了 Vivid,我们还遮蔽辅助应用程序上的灯光,该应用程序使用传感器通知/警告视障人士附近有任何物体。这些个人辅助应用程序经过开发,然后在现实世界中进行测试,并显示出令人满意的结果。
(1) 持有下列证明书等之一的人: 身体残疾证、由都道府县知事指定的医生(以下称为“指定医生”)或产业医师出具的诊断书或意见书,证明其患有《残疾人就业促进法》附录所列的身体残疾(仅限于由指定医生出具的心脏、肾脏、呼吸系统、膀胱或直肠、小肠、人类免疫缺陷病毒引起的免疫系统或肝功能障碍)。 B. 由都道府县知事或政令指定的市市长出具的康复证、或由儿童咨询所、智力障碍者康复咨询所、精神保健福利中心、指定精神保健医生或残疾人职业中心出具的智力障碍认定书。 C. 精神障碍保健福利证。
如今的智能移动设备都内置有屏幕阅读器或语音助手(例如 Siri 或 Google Assistant)。这些设备会读出内容并允许用户通过语音发出命令。此类 AT 的实施使智能移动设备更易于为视障人士或阅读或使用手机有困难的用户所使用。但需要注意的是,这种内置屏幕阅读器或语音助手只有在设备上的内容可供他们访问时才会起作用(例如,通过使用替代文本来描述幻灯片或文档中的图像文件,否则屏幕阅读器将无法描述图像。因此,视障人士将无法获得有关图像或物体的任何信息)。因此,只有在存在可访问内容(也称为“电子无障碍”)的情况下,AT 的使用才会得到优化。
Bonnie Collura 的“Together, Tacit”项目旨在为视力低下、盲人和视力正常的人提供包容性体验,通过创造性合作来交换隐性知识。一种工作流程使用触觉虚拟现实手套,该手套具有振动反馈系统,可模拟虚拟空间中的雕刻感。视障参与者的动作被转化为三维标记。然后,这些虚拟形状被 3D 打印成有形模型,而视力正常和视障团队成员则将其用作合作制造新形式的跳板。另一个工作流程探索如何通过纺织品和绘画来转化触觉。该项目是与宾夕法尼亚州立大学工程学院的教师和学生合作完成的。
摘要 — 本文介绍了 2022 年 IEEE 游戏会议 (CoG) 上的一项新竞赛,名为 DareFightingICE 竞赛。竞赛有两个轨道:声音设计轨道和 AI 轨道。本次竞赛的游戏平台也称为 DareFightingICE,这是一个格斗游戏平台。Dare-FightingICE 是 FightingICE 的声音设计增强版,早在 2021 年 CoG 的一场竞赛中就使用过,以促进格斗游戏中的人工智能 (AI) 研究。在声音设计轨道中,参与者以 DareFightingICE 的默认声音设计作为样本,争夺最佳声音设计,其中我们将声音设计定义为一组声音效果与实现其时序控制算法的源代码相结合。AI 赛道的参与者需要开发他们的 AI 算法,该算法控制一个仅以声音作为输入的角色(盲人 AI)与对手战斗;我们将提供一个深度学习盲人 AI 样本。我们还描述了最大化两个赛道之间协同作用的方法。这项比赛旨在为视障玩家提供有效的声音设计,而视障玩家是游戏社区中一个被忽视的群体。据我们所知,DareFightingICE 比赛是 CoG 内外首个此类比赛。索引术语 — 声音设计比赛、AI 比赛、视障玩家、DareFightingICE、FightingICE、格斗游戏
摘要:随着全球视障人士和盲人人口的稳步增长,开发低成本辅助设备的需求也随之增加。盲杖减少了人力,让人们更好地了解周围环境。此外,它还为视障人士提供了一个机会,让他们无需他人帮助即可从一个地方移动到另一个地方。该设备还可用于养老院,老年人由于视力下降,日常活动困难重重。本文旨在帮助人们“看到”周围的环境。由于人工智能领域现在取得了长足的进步,物体检测等功能变得越来越简单且计算上可行,因此本文实现了这些功能。本文专门研究了安装在棍棒上的设备所捕获的图像上的物体检测和类型,然后可以通过声音或语音的方式将统计数据传递给人。
本文全面介绍了该项目的开发过程及其显著贡献,该项目旨在打造一套专为视障人士定制的物体检测系统。该系统利用 Python 编程语言结合 YOLO(You Only Look Once,只看一次)算法,提供实时物体检测功能。本文深入探讨了所采用的方法、面临的挑战以及为优化系统性能、可用性和可访问性而设计的创新解决方案。通过协作,我们设计出了大量创新解决方案,涵盖算法选择、模型训练、硬件集成、用户体验设计、文档编制和持续改进等各个方面。这项协同努力的成果展现了在为视障人士提供增强的态势感知和导航辅助方面取得的显著进展,从而促进了社区的包容性和自主性。
dot.Lumen 致力于通过触觉反馈技术改变视障人士的出行方式。触觉技术利用振动和触觉将感觉传达给用户。全球有超过 3.3 亿视障人士,导盲犬并不是一个可扩展的解决方案来满足这一需求。受到自动驾驶汽车所用技术的启发,首席执行官兼创始人 Cornel Amariei 及其团队推出了一款使用触觉提示引导用户在室内和室外行走的耳机。这款耳机能够避开障碍物、识别感兴趣的物体并在城市或乡村环境中引导用户,无需互联网连接或预先绘制环境地图。这款眼镜预计将于明年初推出,将与地图和公共交通相结合,引导用户到达目的地。
(1) 持有下列证明书等的人: 身体残疾者证明书或由都道府县知事指定的医生(以下称为“指定医生”)或产业医师出具的诊断书或意见书,表明该人患有《残疾人就业促进法》附录所列的身体残疾(仅限于由指定医生出具的因人类免疫缺陷病毒引起的心脏、肾脏、呼吸系统、膀胱或直肠、小肠、免疫系统或肝功能障碍)。 B. 由都道府县知事或政令指定的市市长出具的康复证明书,或由儿童咨询所、智力残疾人康复咨询所、精神保健福利中心、指定精神保健医生或残疾人职业中心出具的智力残疾人认定书。 C. 精神残疾人精神保健福利证明书。
这项研究是一个大型项目的一部分,该项目旨在让有视力障碍 (VI) 的学生更容易学习在线数学,研究了使用屏幕阅读器的 VI 学生的数学评估项目的文本质量。通过使用约 2950 万名参加 MAP Growth 数学评估标准版的学生和 48,845 名参加无障碍版的学生的数据,我们确定了高质量项目(这些项目可以同样好地衡量有和没有 VI 的学生的成绩)和低质量项目(显示两组学生之间的差异)。研究人员引入了三种词嵌入方法和三种分类器来预测无障碍评估的项目质量。这项工作加深了我们对障碍的理解,并使用尖端技术开发了一种新方法,可以更好地在线呈现数学内容,以提高可访问性并增加 VI 学生学习数学的机会。