XiaoMi-AI文件搜索系统
World File Search SystemGradient
基于深层确定性政策梯度在动态环境中自动驾驶移动机器人的自主驾驶：奖励成型和事后的经验重播
摘要：在本文中，我们提出了一种基于增强学习的端到端学习方法，用于在有障碍的动态环境中自动驾驶移动机器人。应用两种附加技术来加固学习同时帮助移动机器人找到最佳政策，以无需碰撞而到达目的地。首先，多功能奖励整形技术通过利用有关目的地和障碍的信息来指导代理商实现目标。接下来，采用事后的经验重播技术来解决由稀疏奖励问题引起的经验不平衡，可以帮助代理商找到最佳政策。我们在模拟和现实世界环境中验证了所提出的技术。为了评估所提出方法的有效性，我们比较了五种不同情况的实验。
通过应用程序
摘要：贝叶斯优化（BO）在大量控制应用程序中对昂贵的黑盒功能进行全局优化的数据效果表现出了巨大的希望。传统的BO是无衍生的，因为它仅依赖于性能函数的观察来找到其最佳。最近，已经提出了所谓的第一阶BO方法，该方法还将绩效函数的梯度信息进一步加速收敛。一阶BO方法主要利用标准采集功能，而间接使用内核结构中的梯度信息来学习性能功能的更准确的概率替代物。在这项工作中，我们提出了一种直接利用性能函数（Zeroth-order）及其相应梯度（第一阶）评估的梯度增强的BO方法。为此，提出了一个新型的基于梯度的采集功能，可以识别性能优化问题的固定点。然后，我们利用从多目标优化的想法来制定一种e显策略，以找到最佳贸易点的查询点，这些查询点是传统的Zeorth-rorder-rorde获取功能与拟议的基于梯度的采集函数之间的。我们展示了如何使用拟议的获取 - 增强梯度增强的BO（AEGEBO）方法来加速基于策略的增强型学习的收敛，通过将噪声观察结果结合到可以直接从闭环数据中估算的奖励函数及其梯度的噪声。将AEGBO的性能与传统的BO和基准LQR问题上众所周知的增强算法进行了比较，我们始终如一地观察到在有限的数据预算中显着提高了性能。
使用轻梯度提升机和类别增强模型的混合合奏学习方法，用于基于生活方式的II型糖尿病预测
解决分类和预测挑战，树木集成模型已获得了重要的重要性。促进集合技术是用于预测II型糖尿病的综合技术。光梯度提升机（LightGBM）是一种以其叶片生长策略，减少损失和增强的训练精度而闻名的算法。但是，LightGBM容易过度拟合。相比之下，Catboost使用了称为决策表的平衡基础预测值，该预测值可以减轻过度适应风险，并明显提高测试时间效率。catboost的算法结构抵消了梯度增强偏见，并结合了过度拟合的检测器以尽早停止训练。本研究的重点是开发一种混合模型，该模型结合了LightGBM和Catboost，以最大程度地减少过度拟合并通过降低方差改善效果。为了找到与基础学习者一起使用的最佳超级仪表，使用了贝叶斯超级参数操作方法。通过微调正则化参数阀，混合模型有效地降低了方差（过拟合）。针对LightGBM，Catboost，Xgboost，Deciest Crey，Random Forest，Adaboost和GBM算法的比较评估表明，混合模型具有最佳的F1得分（99.37％），召回率（99.25％）和准确性（99.37％）。因此，拟议中的框架对医疗保健行业的早期糖尿病有望有望，并显示出与糖尿病共享相似性的其他数据集的潜在适用性。
通过基于梯度的学习策略最大化多智能体量子游戏的局部奖励
摘要：本文深入研究了多智能体环境中复杂的量子游戏世界，提出了一个模型，其中智能体利用基于梯度的策略来优化局部奖励。引入了一种学习模型，重点关注智能体在各种游戏中的学习效率以及量子电路噪声对算法性能的影响。研究揭示了量子电路噪声与算法性能之间的非平凡关系。虽然量子噪声的增加通常会导致性能下降，但我们表明，在某些特定情况下，低噪声可以意外地提高具有大量智能体的游戏中的性能。这种见解不仅具有理论意义，而且考虑到当代嘈杂的中型量子 (NISQ) 计算机的固有局限性，也可能具有实际意义。本文提出的结果为量子游戏提供了新的视角，并丰富了我们对多智能体学习与量子计算之间相互作用的理解。强调了挑战和机遇，为量子计算、博弈论和强化学习交叉领域的未来研究指明了有希望的方向。
直接测量 25 cm2 铜气体扩散电极上的电化学选择性梯度
摘要：在过去十年中，电化学 CO 还原 (COR) 系统的可访问活动数量级增加了，特别是通过实施气体扩散电极 (GDE) 架构。随着 GDE 的有效几何面积（cm 2 到 m 2 ）的扩大，反应器性能可能会因物理和化学空间变化而发生变化，而多相和多产品电化学系统的化学复杂性使这种变化变得复杂。这项工作通过多端口采样反应器测量和评估 COR 性能指标，以测量 COR GDE 通道下游的反应物和产物浓度。研究发现，氢气析出反应 (HER) 的法拉第效率 (FE) 在通道下游增加，这主要是由于 CO 分压的降低，而乙烯的选择性在通道下游保持相对恒定。这项工作强调了随着电化学反应器的物理扩大，性能的不均匀性，对 COR 和 CO2R 系统的未来扩展具有重要意义。R
使用SWIN Transformer的头明梯度注入的自我注意图
颅内出血（ICH）是一种威胁生命的医疗紧急情况，需要及时，准确的诊断才能有效治疗并提高患者的存活率。虽然深度学习技术已成为医学图像分析和处理的主要方法，但最常用的监督学习通常需要大型，高质量的注释数据集，这些数据集可能是昂贵的，尤其是对于像素/体素/体素图像分段。为了应对这一挑战并促进ICH治疗决策，我们采用了一种新型的弱监督方法来进行ICH分割，并利用经过分类标签的ICH分类任务训练的SWIN变压器。我们的方法利用了注入头梯度的自我发项图的分层组合，以生成准确的图像分割。此外，我们对不同的学习策略进行了探索性研究，并表明二进制ICH分类对自我发场地图的影响更大，与完全ICH的亚型相比。平均骰子得分为0.44，我们的技术达到了与流行的U-NET和SWIN-UNETR模型相似的ICH分割性能，并使用GradCam胜过类似的弱监督方法，这表明了在挑战医学图像分割任务中所构成的框架的巨大潜力。我们的代码可在https://github.com/healthx-lab/hgi-sam上找到。
使用随机策略网络寻找无梯度的连续动作博弈的混合策略均衡
我们研究在无法获得梯度的情况下计算连续动作博弈的近似纳什均衡的问题。这种游戏访问在强化学习环境中很常见，其中环境通常被视为黑匣子。为了解决这个问题，我们应用了零阶优化技术，将平滑梯度估计量与均衡寻找动力学相结合。我们使用人工神经网络来模拟玩家的策略。具体而言，我们使用随机策略网络来模拟混合策略。这些网络除了接收观察结果外，还接收噪声作为输入，并且可以灵活地表示任意依赖于观察结果的连续动作分布。能够模拟这种混合策略对于解决缺乏纯策略均衡的连续动作博弈至关重要。我们使用博弈论中纳什收敛指标的近似值来评估我们方法的性能，该指标衡量玩家从单方面改变策略中可以获得多少益处。我们将我们的方法应用于连续的 Colonel Blotto 游戏、单品和多品拍卖以及可见性游戏。实验表明，我们的方法可以快速找到高质量的近似均衡。此外，它们还表明输入噪声的维度对于性能至关重要。据我们所知，本文是第一篇解决具有无限制混合策略且没有任何梯度信息的一般连续动作游戏的论文。
通过鼓励一致的基于梯度的解释来改善视觉接地
我们提出了一种基于保证金的损失，用于调整联合视觉语言模型，以便其基于梯度的解释与人类为相对较小的接地数据集提供的区域级注释一致。我们将这一目标作为注意掩盖一致性（AMC），并证明它比以前依靠使用视觉模型来评分对象检测器的输出的方法产生了较高的视觉接地结果。尤其是，在标准视觉模型目标之上训练AMC的模型获得了86的最新精度。在Flickr30k视觉接地基准中49％，绝对改进为5。38％与在相同水平的监督下训练的最佳先前型号时。我们的方法在既定的基准中都表现出色，可以在易于测试中获得80.34％的准确性，而在较难分裂中获得了80.34％的准确性，而在易于测试中的精度为64.55％。AMC有效，易于实现，并且是一般的，因为任何视觉模型都可以采用，并且可以使用任何类型的区域注释。
硫磺梯度沿智利温泉瓷器的温度梯度沿温度梯度的分布和活性
摘要：在陆地温泉中，微生物垫群落的一些成员利用硫化学物种来减少和氧化代谢。在这项研究中，使用拟议的元元方法和特定的apprifiencation and Perpeciogologies and Practififuctation and Perpeci-Omplifuctation and Prifucte and（Apprififucte and Amplififation and apprififation and apprififation and apprififation and prop），在本研究中评估了沿温度梯度（48-69°C）沿温度梯度（48-69°C）评估硫代生物代谢细菌的多样性和活性。 （硫代水解酶）基因。总体而言，硫代谢的关键参与者沿温度梯度大有不同，这与评估与当前全球气候变化情况下与硫循环相关的微型ISMS的可能影响有关。我们的结果强烈表明，硫酸盐还原发生在整个温度梯度中，取决于温度，并由不同的分类单元支持。同化的硫酸盐还原是最相关的途径，而硫磺氧化系统（SOX）在低温下可能更多样化。氯氯氯植物的成员在66℃下显示出较高的硫循环相关转录活性，对硫酸盐还原和对硫代硫酸盐的氧化有潜在的贡献。相比之下，在最低温度（48℃），伯克霍尔德里亚斯（Burkholderiales）和乙酰杆菌（均为假霉菌（Pseudomonadota），也称为蛋白杆菌）在非相似硫酸盐还原/氧化和硫代硫酸盐的代谢方面表现出更高的贡献。蓝细菌和平霉菌在还原性硫酸盐还原方面特别活跃。对APR A和SOX B基因的分析指向Burkholderiales（γ-杆菌）的成员是这些基因的温度梯度沿着温度梯度沿最主要和活跃的。Changes in the diversity and activity of different sulfur-metabolizing bacteria in photoautotrophic microbial mats along a temperature gradient revealed their important role in hot spring environments, especially the main primary producers ( Chloroflexota / Cyanobacteriota ) and diazotrophs ( Cyanobacteriota ), showing that carbon, nitrogen, and sulfur cycles are highly linked in these extreme系统。
野生果蝇社区的微生物组结构沿热带高度梯度和实验室比较
与自由生活的微生物群落相比，与宿主相关的微生物 - 社区中环境梯度沿环境梯度的抽象变化尚不清楚。由于海拔梯度可以作为气候变化的自然代理，因此了解这些梯度的贴合可以使我们对威胁宿主及其共生微生物在温暖世界中面临的理解。在这项研究中，我们分析了来自澳大利亚热带雨林的四种果蝇物种的细菌微生物群。我们沿两个山梯度在高和低海拔的野生个体中采样，以确定自然多样性模式。此外，我们抽样了从相同地区建立的同型人线的实验室rear个个体，以查看实验室中是否保留任何自然模式。在这两种环境中，我们都控制了饮食，以帮助阐明微生物组组成的其他确定性模式。我们发现果蝇细菌群落组成之间的较小但偏差差异很大，在不同的果蝇和地点之间存在一些显着的分类差异。此外，我们发现，收集的pupae比实验室奔跑的p pa的微生物组显着丰富。我们还发现了两种类型的饮食中的类似的微生物组组成，这表明果蝇微生物群之间发现的显着差异是周围环境的产物，这些环境具有不同的细菌物种池，可能与温度高度差异限制。我们的结果表明，实验室和领域标本之间的比较研究有助于揭示微生物组群落中可能存在的单一物种的真实变异性。