可变形图像配准是医学图像分析的基本步骤。最近,Transformer 已用于配准,其表现优于卷积神经网络 (CNN)。Transformer 可以捕获图像特征之间的长距离依赖性,这已被证明对配准有益。然而,由于自注意力的计算/内存负载高,Transformer 通常用于下采样特征分辨率,无法捕获全图像分辨率下的细粒度长距离依赖性。这限制了可变形配准,因为它需要每个图像像素之间精确的密集对应关系。没有自注意力的多层感知器 (MLP) 在计算/内存使用方面效率高,从而可以捕获全分辨率下的细粒度长距离依赖性。然而,MLP 尚未在图像配准中得到广泛探索,并且缺乏对医学配准任务至关重要的归纳偏差的考虑。在本研究中,我们提出了第一个基于相关感知 MLP 的配准网络 (CorrMLP) 用于可变形医学图像配准。我们的 CorrMLP 在新颖的粗到细配准架构中引入了关联感知多窗口 MLP 块,该架构可捕获细粒度多范围依赖性以执行关联感知粗到细配准。对七个公共医疗数据集进行的大量实验表明,我们的 CorrMLP 优于最先进的可变形配准方法。
尽管基于3D的GAN技术已成功地应用于具有各种属性的照片真实的3D图像,同时保持视图一致性,但很少有关于如何罚款3D impersimens的研究,而不会限制其属性特定对象的特定对象类别。为了填补此类研究空白,我们提出了一个基于3D的GAN代表的新型图像操纵模型,以对特定的自定义贡献进行细粒度控制。通过扩展最新的基于3D的GAN模型(例如,EG3D),我们的用户友好定量操作模型可以实现对3D操作多属性数量的精细而归一化的控制,同时实现了视图一致性。我们通过各种实验验证了我们提出的技术的有效性。
苏格兰大学苏黎世大学和苏黎世大学,瑞士神经信息学研究所B卫生技术部,丹麦·托克尼斯克大学DTU,丹麦C丹麦林格比,丹麦C丹麦C型磁力共鸣研究中心,哥本哈根大学医院HVIDOVRE,HIVIDOVRE,DENMARK DENMARK DENMARK DENMARK DENMARS DENMARK DENMARK DENMARK DENMARK DENMARK DENMARK DENMARKERIERIRE; 8248,法国巴黎,德国认知,典范,纽约州纽约州哥伦比亚大学哥伦比亚大学哥伦比亚大学电气工程系PSL研究大学,美国哥伦比亚大学,美国哥伦比亚大学哥伦比亚省哥伦比亚省哥伦比亚省哥伦比亚省大脑行为研究所,纽约州哥伦比亚大学,美国纽约州哥伦比亚大学,美国纽约市,美国纽约市,纽约州,美国纽约市,纽约州,纽约州,美国纽约市,纽约州,纽约州。纽约州纽约州曼海斯特市Feinstein医学研究所
计算机视觉社区过去主要集中于视觉算法的开发,用于对象检测,跟踪和分类,并在白天和类似办公室的环境中使用可见的范围传感器。在过去的十年中,红外线(IR),深度,X射线和其他不可见名的成像传感器仅在医学和防御等特殊领域中使用。与传统的计算机视觉相比,在这些感觉领域的兴趣相对较低,部分原因是它们的高成本,低分辨率,图像质量差,缺乏广泛可用的数据集以及/或缺乏对频谱不可访问的部分的优势的考虑。随着传感器技术的迅速发展,传感器成本急剧下降,这些局限性正在克服。此外,对安全和可靠性是主要问题的自主系统的兴趣日益增强,强调了强大的感知系统的重要性。在此类关键系统中,在不同频谱中运行的传感器相互补充,以克服每个单独的传感器的局限性,以在各种照明和天气条件下提供强大而可靠的感知。
面部表达识别(FER)在计算机视觉应用中起着关键作用,包括视频不存在和人类计算机的相互作用。尽管FER的进展没有局部进步,但在处理在现实世界情景和数据集中遇到的低分辨率面部图像时,性能仍然会摇摆不定。一致性约束技术引起了人们的关注,以产生强大的卷积神经网络模型,从而通过增强来适应变化,但它们的功效在低分辨率FER的领域中得到了影响。这种性能下降可以归因于网络难以提取表达特征的增强样本。在本文中,我们确定了在考虑各种程度的分辨率时引起过度拟合问题的硬样品,并提出了新颖的硬样品感知一致性(HSAC)损失函数,其中包括组合注意力同意和标签分布学习。通过结合高分辨率和翻转低分辨率图像的激活图,将注意力图与适当的目标注意图与适当的目标注意图与适当的目标注意力图相结合的注意图与适当的目标注意力图的注意力图对齐。我们通过结合原始目标和高分辨率输入的预测来测量低分辨率面部图像的分类难度,并适应标签分布学习。我们的HSAC通过有效管理硬样品来赋予网络能够实现概括。各种FER数据集上的广泛实验证明了我们提出的方法比现有方法的多尺度低分辨率图像的优越性。此外,我们在原始RAF-DB数据集中达到了90.97%的最新性能。
分割算法的疗效经常因拓扑错误,连接中断和空隙等拓扑错误而受到损害。为了解决这一问题,我们引入了一种新颖的损失函数,即拓扑 - 意识局灶性损失(TAFL),该功能将基于基于地面真实和预测段蒙版的持久性图表之间的拓扑结构术语与拓扑结构术语结合在一起。通过实施与地面真理相同的拓扑结构,拓扑的约束可以有效地解决拓扑结构,而焦点损失可以解决阶级失衡。我们首先是从地面真理和预测的分割掩模的过滤的立方复合物中构造持久图。随后,我们利用sindhorn-knopp算法来确定两个持久图之间的最佳运输计划。最终的运输计划最小化了将质量从一个分布到另一个分布的运输成本,并在两个持久图中的点之间提供了映射。然后,我们根据该旅行计划计算沃斯堡的距离,以测量地面真相和预测的面具之间的拓扑差异。我们通过训练3D U-NET与MICCAI脑肿瘤分割(BRATS)CHALLENE验证数据集来评估我们的方法,该数据需要准确地分割3D MRI扫描,从而整合各种方式,以精确鉴定和跟踪恶性脑肿瘤。然后,我们证明,通过添加拓扑约束作为惩罚项,通过将焦点损失正规化来提高分段性能的质量。
为了确保组织和个人获得适当程度的成功,一个非常重要的因素的一个很好的例子,这个因素变得越来越重要,就是能够拒绝没有或几乎没有恐惧感的申请人。在早期,这种人被认为是飞行员训练的最佳候选人。现在我们知道,一个无所畏惧的飞行员在对自己和每个人构成威胁时,
计算机视觉社区过去主要集中于视觉算法的开发,用于对象检测,跟踪和分类,并在白天和类似办公室的环境中使用可见的范围传感器。在过去的十年中,红外线(IR),深度,X射线和其他不可见名的成像传感器仅在医学和防御等特殊领域中使用。与传统的计算机视觉相比,在这些感觉领域的兴趣相对较低,部分原因是它们的高成本,低分辨率,图像质量差,缺乏广泛可用的数据集以及/或缺乏对频谱不可访问的部分的优势的考虑。随着传感器技术的迅速发展,传感器成本急剧下降,这些局限性正在克服。此外,对安全和可靠性是主要问题的自主系统的兴趣日益增强,强调了强大的感知系统的重要性。在此类关键系统中,在不同频谱中运行的传感器相互补充,以克服每个单独的传感器的局限性,以在各种照明和天气条件下提供强大而可靠的感知。
科学素养(Montecalvo & Larkin,2018)。然而,普通民众支持国家太空计划,美国(Pew,2019)和中国(Hines,2022)等国家的研究表明就是如此。此外,研究发现,人们大大高估了公共部门在太空探索方面的支出(ESA,2018)。另一个重要方面是学生的参与意愿。研究表明,学生普遍对学习太空的可能性持积极态度(Bergstrom 等人,2016)。学生认为物理等太空学科对他们未来的职业生涯很有趣,也很有用(Reid & Skryabina,2002),空间科学应该在一个人的整体常识中占有更重要的地位(Ottavianelli & Good,2002)。尽管如此,太空探索也被认为是奢侈和不必要的。太空研究被认为很困难,只适合最优秀和最聪明的人(Bergstrom 等人,2016)。关于空间科学的另一个经常被提及的误解是该学科的狭隘观点。它主要与天文学、物理学或机械工程有关,而这一领域涉及更多学科,例如生物学、地质学、信息学、电信、医学、心理学、法律等。人们认为空间领域以男性为主,由智力超群的人占据,大多数人无法进入。这种看法可能会造成一种同质环境,只有特定类型的人才能代表这一领域。为了使空间更具包容性、可及性和社会相关性,有必要对这一主题进行进一步研究。在本文中,我们希望展示我们在大学生中进行的混合方法研究的结果。这项研究旨在确定人们对太空探索和参与太空的总体态度。我们还调查了性别差异。
摘要 在计算机视觉和机器人领域,具身代理有望探索其环境并执行人类的指令。 这就需要能够根据第一人称观察充分理解 3D 场景,并将其语境化为语言进行交互。 然而,传统研究更多地侧重于从全局视角进行场景级输入和输出设置。 为了解决这一差距,我们引入了 EmbodiedScan,这是一个多模态、以自我为中心的 3D 感知数据集和整体 3D 场景理解的基准。 它包含超过 5k 个扫描,封装了 1M 个以自我为中心的 RGB-D 视图、1M 个语言提示、160k 个 3D 导向框,涵盖 760 多个类别,其中一些与 LVIS 部分一致,以及具有 80 个常见类别的密集语义占用率。 基于这个数据库,我们引入了一个名为 Embodied Perceptron 的基线框架。它能够处理任意数量的多模态输入,并表现出卓越的 3D 感知能力,无论是在我们建立的两个系列基准测试(即基本 3D 感知任务和基于语言的任务)中,还是在野外。
