详细内容或原文请订阅后点击阅览
迪士尼开发出用于电影制作的高质量换脸技术
Буквально за несколько лет нейронные сети научились крайне правдоподобно заменять лица людей на видео. Теперь, благодаря новым исследованиям 迪士尼研究, подобная нейросетевая технология может стать легитимным 和 высококачественным струментом для киностудий, работающих над визуальными эффектами для голливудских блокбастеров.
来源:Robogeek新闻频道(关于机器人技术的俄罗斯与世界新闻)在短短几年内,神经网络已经学会了极其合理地替换视频中的人脸。现在,得益于迪士尼研究中心的新研究,这种神经网络技术可以成为电影制片厂为好莱坞大片制作视觉效果的合法、高质量工具。
创建假视频的最大挑战之一是创建一个庞大的人脸图像数据库 - 数千种不同的表情可用于欺骗原始视频。显然,数据库越大、图像质量越高,欺骗的质量就越好,但是,图像通常取自分辨率有限的来源,因为即使是 4K 视频也可以产生低分辨率图像考虑到在照片的整个画面中发现小脸的频率。
因此,创建真正令人信服的深度赝品的第一步是从高质量的来源开始。苏黎世联邦理工学院和迪士尼研究工作室的研究人员在 2020 年欧洲图形渲染研讨会上发表的论文《用于视觉效果的高分辨率神经面部交换》详细介绍了该主题的多项创新和新方法。他们的技术产生的百万像素结果具有足够的质量和分辨率,可用于实际电影制作。
换脸在影视行业并不罕见;通常情况下,演员的特技会双视镜头,然后需要进行大量的后期制作,以确保屏幕上的人看起来完全像他们应该的样子。解决这些问题通常需要重新拍摄或巧妙的 CG 和合成,而这并不便宜。得益于新的研究,现有的镜头可以用来训练一种算法,然后该算法可以自行纠正所有这些问题。
视频