我们提出了一种新型的使用生成对抗网络的新型典范引导的面部介绍框架。我们的方法不仅保留了输入面部图像的质量,而且还可以使用类似示例性的面部属性来完成图像。我们通过同时利用输入图像的全局样式,从随机潜在代码生成的随机样式以及示例图像的示例样式来实现这一目标。我们引入了一种新颖的属性相似性指标,以鼓励网络以一种自我监督的方式从示例中学习面部属性的风格。为了确保跨油漆区域边界的自然过渡,我们引入了一种新型的空间变体梯度反向传播技术,以根据空间位置调整损耗梯度。我们通过实用应用程序对公共Celeba-HQ和FFHQ数据集进行了广泛的评估,这证明了面部涂漆的视觉质量卓越。源代码可在https://github.com/longlongaaago/exe-gan上找到。
红外图像中的多级对象检测对于军事和平民使用很重要。深度学习方法可以获得高精度,但需要大规模数据集。我们提出了一个生成数据增强框架文档,用于使用有限数据的红外多级对象检测。本文的贡献是四倍。首先,Doci-Gan被设计为有条件的图像介绍框架,得出配对的红外多级对象图像和注释。其次,为文本到图像转换器配制了将文本格式对象注释转换为边界框掩码映像,从而导致增强是掩盖图像 - 图像 - 绘制图像图像翻译。第三,产生了基于多形态侵蚀的损失,以减轻对本地背景和全球背景的涂料不一致的不一致性。最后,为了生成各种图像,人工多级对象注释在增强过程中与真实的对象注释集成在一起。实验结果表明,具有高质量红外多级对象图像的文档增强数据集,从而提高了对象检测基准的准确性。
电子断层扫描作为一种重要的三维成像方法,为从纳米到原子尺度探测材料的三维结构提供了一种强有力的方法。然而,作为一个重大挑战,缺楔引起的信息丢失和伪影极大地阻碍了我们获得高保真度的纳米物体的三维结构。从数学上讲,断层扫描逆问题定义不明确,因为解是不唯一的。传统方法,如加权反投影 (WBP) 和同时代数重建技术 (SART) [1],由于倾斜范围有限,缺乏恢复未获取的投影信息的能力;因此,使用这些方法重建的断层图像会失真,并受到伸长、条纹和鬼尾伪影的污染。总方差最小化 (TVM) [2] 结合了迭代重建和正则化,已被开发用于恢复丢失的信息并减少由缺失楔形引起的伪影。然而,TVM 的一个缺点是它不是无参数的并且计算成本高昂。除此之外,TVM 或任何广义 TVM 方法的真正问题是它们被绑定到一个正则化,该正则化会促进对解决方案的一个先验约束,而该解决方案可能适合也可能不适合感兴趣的对象。在本文中,我们应用机器学习,特别是深度学习来解决这个问题。图1 显示,通过在正弦图和断层图域中分别加入两个修复生成对抗网络 (GAN) 模型可以有效地恢复未获取的投影信息 [3]。我们首先设计了一个基于生成对抗网络 (GAN) 中的残差-残差密集块的正弦图填充模型。然后,使用 U-net 结构生成对抗网络来减少残差伪影。联合深度学习模型对于缺失角度高达 45 度的缺失楔形正弦图实现了卓越的断层扫描重建质量。该模型性能的提高源于将问题分解为两个独立的域。在每个域中,都可以有效地学习基于训练过的“先验”的独特解决方案。此外,与基于正则化的方法相比,这种深度学习方法是一种没有任何超参数的端到端方法。其性能与先验知识或人类操作员设置超参数的经验无关。