详细内容或原文请订阅后点击阅览
AI 现在允许您在视频 (+video) 上假装舞蹈动作
事实证明,在处理人物视频片段方面,人工智能是一种非常强大的工具。开发人员和工匠每天都在该领域寻找人工智能的新应用。现在,人工智能从视频片段中读取其他人的舞蹈动作,并将其传输到另一个视频中的目标人物。
来源:Robogeek新闻频道(关于机器人技术的俄罗斯与世界新闻)事实证明,在处理人物视频片段方面,人工智能是一种非常强大的工具。开发人员和工匠每天都在该领域寻找人工智能的新应用。现在,人工智能从视频片段中读取其他人的舞蹈动作,并将其传输到另一个视频中的目标人物。
开发该系统的加州大学伯克利分校研究人员表示,该系统由几个离散的步骤组成。首先,录制原始视频,并通过子程序将模型的所有动作转换为线框图形。同时,为了高质量传输,需要相当多的视频:以每秒120帧的速度大约20分钟。线框图准备好后,将源模型的运动转移到目标模型(值得注意的是,开发人员考虑使转移尽可能真实,因此在此过程中,框架的比例根据与目标模型的参数)。然后,pix2pixHD 算法将模型的动作转换为另一个人重复原始视频中的动作的新视频
描述起来非常简单,但是这里有很多巧妙的技术解决方案。例如,您需要一个子程序来平滑线框人物的运动,以便舞者不会不必要地抽搐,还有一个单独的神经网络旨在复制主体的脸部以确保真实感等。
该程序也有一定的局限性,例如,它无法准确地模拟宽大、宽松的衣服,因此人必须穿紧身的衣服。视频中存在不少视觉异常,例如目标舞者和源舞者的关节不匹配,或者软件的人工智能无法重现复杂的手部动作。