多个实例学习(MIL)是计算病理学中最广泛使用的框架,包括分型,诊断,预后等等。但是,iS-iSting MIL范式通常需要脱机实例提取器,例如预训练的重新网络或Foun-Dation模型。这种方法缺乏在特定下游任务中进行微调进行微调的能力,从而限制了其适应性和性能。为了解决此问题,我们提出了一个重新安装的区域变压器(R 2 T),用于在线重新安装实例功能,该功能可以限制精细元素的本地功能并在不同地区建立联系。与现有的作品不同,该作品专注于预训练强大的功能提取器或设计复杂的实例聚合器,r 2 t量身定制为在线重新设计实例功能。它是一种便携式模块,可以无缝集成到主流MIL模型中。对常见的综合病理学任务的广泛实验结果验证:1)功能重新嵌入基于Resnet-50特征的MIL模型的性能到基础模型模型的水平,并进一步增强了基础模型特征的性能; 2)r 2 t可以对各种MIL模型引入更大的性能改进; 3)R 2 T-MIL,作为R 2 T-增强的AB-MIL,以大幅度优于其他最新方法。该代码可在以下网址提供:https://github.com/dearcaat/rrt-mil。
主要关键词