XiaoMi-AI文件搜索系统
World File Search System语义
通过更强的指导增强了语义分割的生成数据增强
摘要：数据增强对于像素的注释任务（如语义分割）至关重要，在语义分段中，标签会重大努力和大量劳动。传统方法，涉及简单的转换，例如旋转和翻转，创建新图像，但通常沿关键语义维度缺乏多样性，并且无法改变高级语义属性。为了解决这个问题，生成模型已成为通过生成合成图像来增强数据的有效解决方案。可控的生成模型通过使用提示和来自原始图像的视觉引用为语义分割任务提供数据增强方法。但是，这些模型在生成合成图像时面临挑战，这些图像由于难以创建有效的提示和视觉参考而准确地反映原始图像的内容和结构。在这项工作中，我们引入了使用可控差异模型进行语义分割的有效数据增强管道。我们提出的方法包括使用类别附加和视觉事先融合的类别添加的有效及时生成，以增强对真实图像中标记的类的关注，从而使管道能够生成精确数量的增强图像，同时保留分割标记的类的结构。此外，我们在合成和原始图像合并时实现了平衡算法的类平衡算法。对Pascal VOC数据集的评估，我们的管道证明了其在生成语义分割的高质量合成图像方面的有效性。我们的代码可在此HTTPS URL上找到。
我们准备好在自动驾驶中进行实时激光雷达语义细分吗？
摘要 - 在自动移动和机器人系统的感知框架内，对Lidars通常生成的3D点云的语义分析是许多应用程序的关键，例如对象检测和识别以及场景重建。场景语义分割可以通过将3D空间数据与专门的深神经网络直接整合在一起来实现。尽管这种类型的数据提供了有关周围环境的丰富几何信息，但它也提出了许多挑战：其非结构化和稀疏性质，不可预测的规模以及苛刻的计算要求。这些特征阻碍了实时半分析，尤其是在资源受限的硬件 - 构造方面，构成了许多机器人应用的主要计算组件。因此，在本文中，我们研究了各种3D语义分割方法，并分析了其对嵌入式NVIDIA JETSON平台的资源约束推断的性能和能力。我们通过标准化的培训方案和数据增强进行了公平的比较，为两个大型室外数据集提供了基准的结果：Semantickitti和Nuscenes。
化学元素的通用语义嵌入用于增强材料推理和发现的化学元素
图2。使用BERT衍生特征与（a）预测和（b）材料属性分类的模型性能比较模型性能。SMA，Ti合金和HEA的10倍MAE图与广泛的平行测试中所选特征数量（1-8）的函数相同。蓝线使用传统的经验特征（例如电负性，原子半径）表示模型性能，而红线表示BERT衍生的材料特征。检查的特性包括相变温度（MP，AP），转化焓（ΔH），屈服强度（σs），终极拉伸强度（σb），Vickers硬度（VH）和伸长率（EL）。Classification tasks include binary classification of Solid Solution (SS) vs. Non-Solid Solution (NSS), ternary classification of phase forms (Face-Centered Cubic (FCC), Body-Centered Cubic (BCC), and FCC-BCC mixed), and quaternary classification of SMA phases (B19'-B2, B19'-B19-B2, B19'-R-B2, B19-B2, and R-B2）。bert衍生的特征始终在几乎所有属性和特征数量上产生较低的预测误差，从而突出了它们捕获合金组成和属性之间内在关系的卓越能力。阴影区域代表跨平行测试的标准偏差。
提高语义细分的效率...
提取和分析详细的视觉信息。传统的人工神经网络（ANN）在这一领域取得了长足的进步，但是尖峰神经网络（SNN）的能源效率和以生物为基础的基于时间的处理而引起了人们的关注。然而，由于限制，诸如量化误差和次优膜电位分布之类的局限性，现有的基于SNN的语义分割方法面临着高精度的挑战。这项研究介绍了一种基于尖峰 - 深板的新型尖峰方法，并结合了正则膜电位损失（RMP-loss）来应对这些挑战。建立在DeepLabv3体系结构的基础上，提出的模型通过优化SNN中的膜电位分布来利用RMP-loss来提高分割精度。通过优化膜电位的存储，其中仅在最后一个时间步骤存储值，该模型可显着减少内存使用和处理时间。这种增强不仅提高了计算效率，而且还提高了语义分割的准确性，从而可以对网络行为进行更准确的时间分析。提出的模型还显示出更好的稳健性，以防止噪声，在不同级别的高斯噪声下保持其精度，这在实际情况下很常见。所提出的方法在标准数据集上展示了竞争性能，展示了其用于节能图像处理应用的潜力
在听故事中使用词语上下文语义进行 MEG 编码
大脑编码是将刺激映射到大脑活动的过程。关于功能性磁共振成像 (fMRI) 的语言大脑编码，有大量与句法和语义表征相关的文献。脑磁图 (MEG) 具有比 fMRI 更高的时间分辨率，使我们能够更精确地观察语言特征处理的时间。与 MEG 解码不同，使用自然刺激的 MEG 编码研究很少。现有的关于故事聆听的研究侧重于音素和简单的基于单词的特征，而忽略了上下文、句法和语义方面等更抽象的特征。受先前 fMRI 研究的启发，我们使用基本的句法和语义特征，以不同的上下文长度和方向（过去与将来）对 8 名听故事的受试者的数据集进行 MEG 大脑编码研究。我们发现 BERT 表示可以显著预测 MEG，但不能预测其他句法特征或词向量（例如 GloVe），这使我们能够在听觉和语言区域随时间以分布式方式对 MEG 进行编码。特别是，过去的背景对于获得显著的结果至关重要。索引术语：大脑编码、人机交互、MEG、句法、语义、上下文长度
物联网设备与智能空间之间的语义桥梁
智能空间管理和应用程序开发之所以具有挑战性，部分原因是用户的高级需求与物联网设备的低级功能之间存在语义鸿沟。智能空间中的利益相关者需要处理与特定物联网设备的通信、捕获数据、处理数据并将其抽象出来以生成有用的推论。此外，由于智能空间应用程序是为特定传感器部署而开发的，因此这使得其可重用性变得困难。在本文中，我们介绍了一种物联网智能空间的整体方法，即 SemIoTic 生态系统，以促进应用程序开发、空间管理和向其居民提供服务。该生态系统基于一个集中式存储库，开发人员可以在其中宣传他们的与空间无关的应用程序；以及部署在每个智能空间中的 SemIoTic 系统，该系统与这些应用程序交互以向它们提供所需的信息。SemIoTic 应用程序是使用元模型开发的，该元模型定义了从智能空间中抽象出来的关于空间本身及其中的人员的高级概念。然后，可以用用户友好的高级概念来表达应用程序需求，这些概念由 SemIoTic 自动转换为适合每个空间中底层设备部署的传感器/执行器命令。我们介绍了已在加州大学欧文分校部署的生态系统的参考实现，该生态系统正在从空间中的数百个传感器中提取数据并向校园成员提供应用程序。
在语义知识图中与Oncodashkb中的高级生物医学数据整合，用于在卵巢癌中找到个性化的可行药物
背景：与基因组规模的患者分析数据相结合的生物医学知识越来越多，为个性化肿瘤学提供了前所未有的机会。但是，大量知识和数据需要可扩展的方法来提供可行的信息以支持临床医生决策[1]。目的：开发整合有关患者的所有相关临床和基因组数据的软件和方法，并能够发现最佳的个性化治疗选择，以及支持文献知识和数据。方法：我们利用语义知识图（SKG），这是一种以对象和关系形式代表医学数据的数据库，链接了几个癌症数据库中先前未连接的信息。为了构建此SKG（Oncodashkb），我们使用BioCypher库[2]。然后，我们整合了来自高级浆液卵巢癌患者的临床数据，包括有关Decider项目（https://deciderproject.eu）收集的基因组变化的信息。然后可以查询SKG，以收集将患者特异性改变与可操作药物联系起来的证据路径。结果：我们的方法提供了完全自动化，系统的和可重复的数据集成工作流程，以及使用现有专家制造的本体论来提供互操作性和语义描述。综合数据由分子肿瘤板的专家评估，并允许以视觉上可访问的格式探索相关的临床和基因组患者数据，旨在易于解释临床医生。重要的是，我们希望该系统揭示从多种融合证据到多摩尼克患者数据的强大案例以及对最新临床和实验知识的广泛且自动化的综述。结论：使用图形数据库作为有价值的工具出现的决策支持系统，通过揭示各种患者数据和以易于理解的格式显示的治疗选项之间的新连接。
使用人体内部脑电图从自然语音中解码语义
Camille R. C. Pescatore 1* , Haoyu Zhang 1* , Alex E. Hadjinicolaou 1 , Angelique C. Paulk 1,2 , John D. Rolston 3 , R. Mark Richardson 4 , Ziv M. Williams 4,5,6 , Jing Cai 4† & Sydney S. Cash 1,2,5† 1 Department of Neurology, Massachusetts General Hospital, Harvard Medical School, Boston, MA.2马萨诸塞州波士顿的马萨诸塞州综合医院神经科学中心和神经记录中心。3，杨百翰和妇女医院神经外科部，马萨诸塞州波士顿哈佛医学院。4马萨诸塞州波士顿哈佛医学院马萨诸塞州综合医院神经外科部。5哈佛大学卫生科学与技术部，马萨诸塞州波士顿。6哈佛医学院，马萨诸塞州波士顿神经科学计划。 *这些作者也同样贡献。 †这些作者也同样贡献。 应向谁致辞，电子邮件：jcai5@mgh.harvard.edu6哈佛医学院，马萨诸塞州波士顿神经科学计划。*这些作者也同样贡献。†这些作者也同样贡献。应向谁致辞，电子邮件：jcai5@mgh.harvard.edu
van Wijngaarden 语法的内在语义
在正式检查程序的（预期）含义时，通常会有很多麻烦，并且会增加复杂性，因为程序的形式语义通常与程序本身以及生成编写程序的编程语言的形式语法无关。相反，van Wijngaarden 语法具有内在语义，即它们的规则包含或表达由它们生成的终端字符串的（预期）含义。这种内在性允许在句法变化和上下文相关条件下保留含义。为了更好地展示 van Wijngaarden 语法语义的内在性，我将它们与属性语法进行了对比，后者是需要对编程语言进行语义分析时（例如在编译中）经常选择的选择。
具身语义和语言的大脑特征
根据具身理论（包括具身、嵌入、扩展、演绎、情境和扎根认知方法），语言表征与我们与周围世界的互动有着内在联系，这反映在语言处理和学习过程中的特定大脑特征中。从具身理论与非模态理论的原始竞争开始，这篇共识论文讨论了一系列精心挑选的问题，旨在确定运动和感知过程何时以及如何参与语言过程，而不是是否参与。我们的研究领域非常广泛，从具身语义的神经生理特征（例如事件相关电位和场以及神经振荡）到语义处理和语义启动对具体和抽象词的影响，到第一和第二语言学习，最后，使用虚拟现实来检查具身语义。我们的共同目标是更好地理解运动和感知过程在语言理解和学习所代表的语言表征中的作用。我们达成共识，基于该领域开展的开创性研究，未来的发展方向是通过承认具体和情境语言和语义过程的多模态性、多维性、灵活性和特质来提高研究结果的外部有效性。