基于AI的动作模仿技术:仅需照片+参考视频即可生成动态动画

AI资讯1周前发布 ainav
9 0

近日,即梦 AI 正式推出全新功能——”动作模仿”。这项创新技术允许用户通过上传一张人物图片与一段参考视频,即可生成动态视频内容,使静态图片中的人物能够精确复现参考视频中的动作,并细致还原其中的情感表达。

即梦 AI 上线 “动作模仿” 功能:照片 + 参考视频即可让人物动起来

即梦 AI 上线 “动作模仿” 功能:照片 + 参考视频即可让人物动起来

这项技术突破支持多种画幅,包括肖像、半身及全身等不同比例。字节跳动智能创作数字人团队为此提供了强大的技术支持。该系统采用了显式和隐式特征混合驱动的方式,能够精准捕捉并复现各种画幅下的肢体动作与人脸表情变化。特别是在面部表情管理方面,借助自研的 face motion tokenizer 技术,可以从驱动视频中精确提取细微的表情变化,从而生成更加生动自然的动态视频。

目前,即梦 AI 已经推出 3 款预设动作模板,并支持用户上传本地文件,视频最长时长为 30 秒。值得注意的是,该功能已经同时在即梦 App 和 Web 端上线运行,所有生成的视频内容都将经过严格的安全审核流程,并自动添加”AI 生成”专属水印,以确保内容来源可追溯。

© 版权声明

相关文章