摘要背景:磁共振(MR)图像是脑肿瘤检测最重要的诊断工具之一。在医学图像处理问题中,脑 MR 图像中胶质瘤肿瘤区域的分割具有挑战性。精确可靠的分割算法对诊断和治疗计划有很大帮助。方法:本文介绍了一种新颖的脑肿瘤分割方法作为后分割模块,该方法使用主要分割方法的输出作为输入,并使分割性能值更好。该方法是模糊逻辑和细胞自动机(CA)的组合。结果:BraTS 在线数据集已用于实现所提出的方法。在第一步中,将每个像素的强度输入模糊系统以标记每个像素,在第二步中,将每个像素的标签输入模糊 CA 以使分割性能更好。在性能饱和时重复此步骤。第一步的准确率为 85.8%,但使用模糊 CA 后的分割准确率达到 99.8%。结论:实际结果表明,与其他方法相比,我们提出的方法可以显著改善 MRI 图像中的脑肿瘤分割。
文本对图像(T2I)合成是一项艰巨的任务,该任务是对文本和图像域及其关系进行建模。最近作品实现的图像质量的实质性改进为Nuberon应用程序铺平了道路,例如语言辅助图像编辑,计算机辅助设计,基于文本的图像检索和培训数据增强。在这项工作中,我们提出了一个简单的问题:与逼真的图像一起,我们是否可以以一种不受影响的方式获得任何有用的副产品(例如前景 /背景或多类分割掩码,检测标签,检测标签),这也将使其他计算机视觉任务任务和应用受益?试图回答这个问题,我们探索了从给定文本中的逼真的图像及其相应的前景 /背景分割掩码。为了实现这一目标,我们与GAN一起实验了共进行分割的概念。具体而言,提出了一种名为“共裂”启发的GAN(COS-GAN)的新型GAN结构,该结构同时从不同的噪声矢量中同时生成两个或多个图像,并利用图像特征之间的空间关注机制来生成逼真的分段掩码,以生成生成的Im-Im-Im-Im-Im-Im-Im-Im-Im-Im-Im-Agens。这种架构的优点是两倍:1)生成的分割掩码可用于专注于前景和背景,以改善生成的图像的质量,2)分段蒙版可以用作其他任务的训练目标,例如访问本地化和分割。在CUB,Oxford-102和可可数据集上进行的广泛实验表明,Cos-Gan能够改善视觉质量,并为发电图像提供可靠的前景 /背景掩码。
用于半分割的大多数现有知识蒸馏方法着重于从原始特征中提取各种复杂知识。但是,这种知识通常是手动设计的,并且像传统功能工程一样依赖于先前的知识。在本文中,我们旨在提出一种使用RAW功能的简单有效的功能蒸馏方法。为此,我们重新审视了功能蒸馏中的开创性工作,Fitnets可以将平方误差(MSE)损失(MSE)损失最小化。我们的实验表明,在某些情况下,这种幼稚的方法可以产生良好的结果,甚至超过了一些精心设计的方法。但是,它需要仔细调整蒸馏损失的重量。通过将fitnets的损失函数分解为差异项和角度差项,我们发现角度差异项的重量受教师特征和学生特征的幅度的影响。我们通过实验表明,角度差异项在特征蒸馏中起着至关重要的作用,而不同模型产生的特征的大小可能会有很大变化。因此,很难确定各种模型的适合减肥体重。为了避免角度蒸馏术语的重量受到特征的影响,我们提出了角度蒸馏,并探索沿不同效率尺寸的蒸馏角度信息,以进行语义分割。广泛的例子表明,我们的简单方法对超级参数表现出极大的效果,并实现了语义细分的最先进的蒸馏性能。
扩散模型代表文本到图像生成中的新范式。除了从文本提示中生成高质量的图像之外,诸如稳定扩散之类的模型已成功扩展到了共同生成的分段伪遮罩。但是,当前的敏感主要依赖于提取与用于图像合成的及时单词相关的关注。这种方法限制了从文本提示中未包含的单词代币中得出的分割掩码的产生。在这项工作中,我们介绍了开放式摄影注意力图(OVAM) - 用于文本到图像扩散模型的无训练方法,可为任何单词生成注意力图。此外,我们提出了一个基于OVAM的轻巧优化过程,用于查找具有单个注释的对象类的准确注意图。
注释歧义由于固有的数据不确定性,例如医学扫描中的界限模糊以及不同的观察者专业知识和偏好已成为训练基于深度学习的医学图像模型的主要观点。为了解决这个问题,普遍的做法是从不同专家那里收集多个注释,导致多评价医学图像分割的设置。现有的作品旨在将不同的注释合并到“地面真实”中,而在众多医疗环境中通常无法实现,或者产生不同的结果,或产生与个人专家评估者相对应的个性化结果。在这里,我们提出了一个更雄心勃勃的多评价医学图像细分的目标,即遵守多元化和个性化结果。指定,我们提出了一个名为d-persona的两个阶段框架(第一个d iversification,然后是角色lization)。在第I阶段,我们利用多个给定注释来训练一个可能性的U-NET模型,并具有约束损失,以证明预测多样性。以这种方式,在第I阶段建造了一个共同的空间,其中不同的潜在代码表示多样化的专家意见。然后,在第二阶段,我们设计了多个基于注意力的投影头,以适应来自共享潜在空间的相应专家提示,然后执行个性化的医疗图像细分。我们评估了内部鼻咽癌数据集和公共肺结核数据集(即LIDC-IDRI)的拟议模型。我们的代码将在https://github.com/ycwu1997/d-persona上发布。的实验实验表明,我们的D-Persona可以同时获得多元化和个性化的结果,从而实现了多评位者医疗图像细分的新SOTA性能。
联合学习允许分布式的医疗机构可以协作学习具有隐私保护的共享预测模型。在临床部署时,接受联邦学习的模型仍会在联邦外面完全看不见的霍斯群岛上使用时仍会遭受性能下降。在本文中,我们指出并解决了联合域的生成(FedDG)的新型问题设置,该设置旨在从多个分布式源域中学习联合模型,以便它可以直接概括为看不见的目标域。我们提出了一种新颖的方法,在持续频率空间(ELCF)中称为情节学习,通过启动每个客户端在数据分散率的挑战性约束下利用多源数据分布来利用多源数据分布。我们的方法通过有效的连续频率空间插值机制以隐私保护方式传输客户之间的分布信息。通过转移的多源分布,我们进一步仔细设计了面向边界的情节学习范式,以将本地学习暴露于域分布变化,尤其是在医学图像分割场景中尤其满足模型概括的挑战。在两个医学图像分割任务上,我们的方法的有效性优于最先进的表现和深入消融实验。可以在https://github.com/liuquande/feddg-elcfs上使用代码。
抽象的脑肿瘤分割是对医疗保健中诊断和治疗计划很重要的重要步骤。大脑MRI图像是根据建议的方法在收集数据并准备进一步分析之前先进行预处理的。建议的研究介绍了一种新策略,该策略使用以生物启发的粒子群优化(PSO)算法来分割脑肿瘤图像。为了提高准确性和可靠性,可以调整分割模型的参数。标准措施等标准度量,例如精度,精度,灵敏度,jaccard索引,骰子系数,特异性,用于绩效评估,以衡量建议的基于PSO的分割方法的有效性。建议方法的总体准确性为98.5%。随后的绩效分析分别为骰子得分系数,Jaccard指数,精度,灵敏度和特异性的91.95%,87.01%,92.36%,90%和99.7%的结果提供了更好的结果。因此,此方法对于放射科医生来说可能是有用的工具,可以支持它们诊断大脑中的肿瘤。关键字 - 脑肿瘤,群智能,粒子群优化,磁共振图像。
数据重播是图像的成功增量学习技术。它通过保留原始或合成的先前数据的储存库来防止灾难性的遗忘,以确保模型在适应新颖概念的同时保留过去的知识。但是,它在视频域中的应用是基本的,因为它只是存储了框架以进行动作识别。本文首次探讨了视频数据重播技术的递增动作分割,重点是动作时间段。我们提出了一个时间连贯的动作(TCA)模型,该模型代表使用生成模型而不是存储单个帧的动作。捕获时间连贯性的调节变量的集成使我们的模型了解随着时间的流逝的作用进化。因此,TCA为重播产生的动作段是多种多样的,并且在时间上是连贯的。在早餐数据集上的10任任务增量设置中,与基准相比,我们的AP可以显着提高准确性高达22%。
尽管磁共振成像(MRI)对脑肿瘤分割和发现非常有帮助,但它在临床实践中缺乏某些方式。作为一种态度,预测绩效的退化是不可避免的。根据当前的实现,在模态特征的训练过程中,不同的模式被认为是独立的,彼此之间是独立的,但是它们是互补的。在本文中,考虑到不同方式对各种肿瘤区域的敏感性,我们提出了一种意识到类别的G组大量学习框架(称为GSS),以弥补本性模态模态提取阶段的信息。确切地说,在每个预测类别中,所有模态的预测构成了一个组,其中选择了最出色的灵敏度的预测作为组领导者。小组领导者与成员之间的合作努力以高的一致性和确定性为基础。作为我们的次要贡献,我们引入了一个随机面具,以减少可能的偏见。GSS采用标准培训策略而无需具体的建筑选择,因此可以轻松地插入现有的全模式内脑肿瘤分段中。在BRATS2020,BRATS2018和BRATS2015数据集上进行了明显的,广泛的实验表明,GSS可以平均证明现有的SOTA算法的性能平均为1.27-3.20%。该代码在https://github.com/qysgithubopen/gss上发布。