详细内容或原文请订阅后点击阅览
混合AI模型Causvid在几秒钟内创建高质量的视频
CAUSVID是由麻省理工学院计算机科学和人工智能研究实验室(CSAIL)与Adobe Research合作开发的混合AI模型。这种创新的工具可以在短短几秒钟内创建高质量的视频,这代表了视频制作及其应用方面的重大进展。 Causvid结合了来自两种不同类型模型的元素:高性能扩散模型[…] Post Hybrid AI模型Causvid Causvid在AI新闻中首次出现在几秒钟内创建高质量的视频。
来源:AI新闻CAUSVID是由麻省理工学院计算机科学和人工智能研究实验室(CSAIL)与Adobe Research合作开发的混合AI模型。这种创新的工具可以在短短几秒钟内创建高质量的视频,这代表了视频制作及其应用方面的重大进展。
CausvidCausvid结合了来自两种不同类型模型的元素:高性能扩散模型和自动回归模型。预训练的扩散模型被用作自回旋模型的“老师”,这使其可以更快地预测视频序列中的下一个图像。
这种混合模型通过将典型的50步流程缩短到很少的动作中,从而提高了视频产生的速度,并且可以以每秒9.4帧的形式生成实时视频,并且第一个图像在仅1.3秒内就以初始延迟。
研究团队和未来愿景
Causvid背后的是MIT和Adobe Research的研究人员,由Tianwei Yin和Qiang Zhang领导。该项目还得到了亚马逊科学枢纽,美国空军和其他研究机构等组织的支持。 Causvid将在夏季举行的大型研究会议CVPR上介绍。
研究小组看到了进一步开发该模型的机会,例如能够直接为不同行业(例如机器人技术和游戏开发)生成剪辑,并具有更高的质量和速度,并且量身定制的变体更高。
更多信息: