手势在人类和人类机器人相互作用中起着关键作用。在基于任务的上下文中,诸如指向之类的神性手势对于指导关注与任务相关的实体至关重要。虽然大多数基于任务的人类和人类手机Di-Alogue专注于封闭世界领域的工作,但重新研究已开始考虑开放世界任务,在这种任务中,与任务相关的对象可能不知道与先验者相互作用。在开放世界任务中,我们认为必须对手势进行更细微的考虑,因为交互者可以使用桥接传统手势类别的手势,以便浏览其任务环境的开放世界维度。在这项工作中,我们探讨了在开放世界任务上下文中使用的手势类型及其使用频率。我们的结果表明需要重新考虑在人类和人类机器人相互作用的研究中进行手势分析的方式。
摘要。人类计算机的交互已从命令行演变为图形,直至有形的用户界面(TUI)。tuis代表了将物理对象纳入数字环境中的新范式,以便为用户提供更丰富,更自然和直观的互动手段。本文回顾了TUIS在认知人体工程学,教育和行业中的应用,并特别强调了TUI在减少认知负荷以及改善保留率和增强解决问题的行为方面可能产生的潜在影响。它涵盖了TUI认知益处的各种案例研究,分布式和体现的认知,可伸缩性和可访问性问题的框架,减少技术障碍以及用户不情愿的方法以及TUI与IoT合并的方式。作者还讨论了TUI如何在智能环境中的网络和控制方面看到巨大的改进。从上述内容中,尽管Tuis承诺与常规GUI有关的巨大好处,但在不同应用程序中的全面利用要求解决成本,适应性和包容性的广泛使用。
1植物医疗系,安登国立大学,安东斯36729,大韩民国; smvahsan@gmail.com 2 Applied Biosciences,Kyungpook国立大学,Daegu 41566,大韩民国; inmamumrassel@gmail.com(m.i.-u.-h.); ashim@knu.ac.kr(a.k.d.)3植物与土壤科学系,美国德克萨斯州科技大学基因组学研究所,德克萨斯理工大学,德克萨斯州拉伯克,美国德克萨斯州79409; mrahman@bsmrau.edu.bd 4 4602,杜姆基杜姆基Patuakhali科学技术大学昆虫学系8602; mahiimam@pstu.ac.bd 5 5 Kumho Life Science Laboratory,Chonnam国立大学,Gwangju 61186,大韩民国; ncpaulcnu@gmail.com 6大加工大学大麻生物技术学院,朝鲜共和国安东斯36729 *通信:hwchoi@anu@anu.ac.kr3植物与土壤科学系,美国德克萨斯州科技大学基因组学研究所,德克萨斯理工大学,德克萨斯州拉伯克,美国德克萨斯州79409; mrahman@bsmrau.edu.bd 4 4602,杜姆基杜姆基Patuakhali科学技术大学昆虫学系8602; mahiimam@pstu.ac.bd 5 5 Kumho Life Science Laboratory,Chonnam国立大学,Gwangju 61186,大韩民国; ncpaulcnu@gmail.com 6大加工大学大麻生物技术学院,朝鲜共和国安东斯36729 *通信:hwchoi@anu@anu.ac.kr
我们正在快速经历一个历史时刻:人们在一台计算机前工作,由一台小型 CRT 控制,专注于仅涉及本地信息的任务。联网计算机变得无处不在,在我们的生活中以及科学、商业和社会互动的基础设施中发挥着越来越重要的作用。为了在新千年推动人机交互的发展,我们需要更好地理解新兴的交互动态,其中焦点任务不再局限于桌面,而是延伸到一个复杂的网络信息世界和计算机介导的交互。我们认为分布式认知理论在理解人与技术之间的交互方面发挥着特殊的作用,因为它的重点一直是整个环境:我们在其中真正做什么以及我们如何协调其中的活动。分布式认知为如何思考设计和支持人机交互提供了彻底的重新定位。作为一种理论,它专门用于理解人与技术之间的交互。在本文中,我们提出分布式认知作为人机交互的新基础,勾勒出一个综合的研究框架,并使用我们早期工作中的选集来提出该框架如何为数字工作材料的设计提供新的机会。
摘要 随着元宇宙概念的不断深入,人类在智能技术进步中迈上了新的高度。本文对当前元宇宙中人机交互的研究进行了文献综述,以“元宇宙”、“人机交互”、“虚拟空间”、“虚拟技术”、“三维重建”、“平行宇宙”、“独立身份”、“兴趣获取”、“区块链”等关键词在 Scopus、Web of Science、Google Academic 等数据库的文献中查找相关文章,从 2018 年至 2023 年的 20 000 多篇文献中筛选出近 100 篇关于元宇宙的前沿研究。最后,运用 PRISMA 原则探索和描述元宇宙底层技术的当前应用状态,这些技术包括第五代通信、人机交互、虚拟技术、区块链、3D 重建等。此外,还对人机交互在元宇宙的未来发展做出了预测。评论认为,5G连接的快速推进使元宇宙的概念成为可能,区块链确保了元宇宙虚拟空间中货币交易的安全。人与计算机在虚拟世界中的交互方式将走向“隐形”,换言之,人机交互在数字领域对用户来说是透明的,人与计算机将以自然、平等的方式相处。在交互中,可穿戴设备可以让交互获得身临其境的体验,但它们限制了参与者的行动和感知自由。更人性化的体感连接将在未来获得关注,让人们更接近元宇宙。
本文介绍了在人机协作背景下代表,推理和交互式学习领域知识的综合体系结构。答案集Prolog是一种非单调逻辑推理范式,用于用不完整的comsense域知识来表示和理由,为任何给定目标计算计划并诊断出意外的观察。基于ASP的推理还用于指导以前未知的动作的互动学习以及编码负担能力,动作前提和效果的公理。此学习将主动探索,反应性动作执行和人类(口头)描述的输入观察以及学习的动作和公理用于后续推理。在模拟机器人上评估了架构,该机器人协助人类在室内域中。
深度学习技术的最新进展为协助病理学家从全切片病理图像(WSI)中预测患者的生存期带来了可能性。然而,大多数流行的方法仅适用于WSI中特定或随机选择的肿瘤区域中的采样斑块,这对于捕捉肿瘤与其周围微环境成分之间复杂相互作用的能力非常有限。事实上,肿瘤在异质性肿瘤微环境(TME)中得到支持和培育,详细分析TME及其与肿瘤的相关性对于深入分析癌症发展的机制具有重要意义。在本文中,我们考虑了肿瘤与其两个主要TME成分(即淋巴细胞和基质纤维化)之间的空间相互作用,并提出了一种用于人类癌症预后预测的肿瘤微环境相互作用引导图学习(TMEGL)算法。具体来说,我们首先选择不同类型的块作为节点来为每个 WSI 构建图。然后,提出了一种新颖的 TME 邻域组织引导图嵌入算法来学习可以保留其拓扑结构信息的节点表示。最后,应用门控图注意网络来捕获肿瘤与不同 TME 组件之间与生存相关的交集以进行临床结果预测。我们在来自癌症基因组图谱 (TCGA) 的三个癌症队列上测试了 TMEGL,实验结果表明 TMEGL 不仅优于现有的基于 WSI 的生存分析模型,而且对生存预测具有良好的可解释能力。
了解人类的社会行为对于综合愿景和机器人技术至关重要。微观的观察(例如,分裂行动)不足,需要采取一种全面的方法来考虑个人行为,组内动态和社会群体层次,以彻底理解。要解决数据集限制,本文引入了JRDB-Social,JRDB的扩展[2]。旨在填补跨室内和室外社会环境的人类理解的空白,JRDB-Social提供了三个层次的注释:个体属性,组内侵入和社会群体环境。该数据集旨在增强我们对机器人应用的人类社会动态的理解。利用最近的尖端多模式大型语言模型,我们评估了我们的基准,以表达其破译社会人类行为的能力。
但是现在,尽管文字处理尚未完成分析,但可用性的前沿已经因为新应用程序和新界面技术的开发和引入而不断向前推进。电子邮件和计算机会议支持等通信应用程序所带来的可用性挑战远比文字处理向非程序员扩展所带来的挑战更加多样化。在当前技术中,多个用户通过极其不同的工作站类型协作访问多个应用程序。就在这些新领域的可用性问题得到阐述和探索的同时,前沿原型正在引入手势(例如手写)和语音输入以及交互式视频输出。这些新发展正在整个行业中以更快的速度、更广泛地发生,并随着时间的推移影响更多的用户。