美团开源：数字人视频生成框架

什么是InfiniteTalk

作为美团视觉智能部开发的一项创新技术，InfiniteTalk是一种基于稀疏帧视频驱动的核心技术。该技术通过引入革命性的视频人像生成方法，仅需少量关键帧即可实现对数字人的精准控制，生成自然流畅的动态视频内容。这一突破性技术有效解决了传统方案中常见的口型、表情与肢体动作脱节问题，为数字人技术的应用带来了新的可能性。

InfiniteTalk的核心功能

• 高效驱动虚拟人物像生成：仅需几个关键帧输入，即可实现对数字人进行实时驱动，确保口型、面部表情与肢体动作的完美同步。
• 高自然度视频输出：通过优化算法显著提升了合成视频的质量，使数字人的表现更加逼真自然，带来沉浸式的观看体验。
• 低资源消耗优势：相比传统方法大幅降低了计算和存储资源需求，在保证生成质量的同时提高了处理效率。
• 开源技术支持：InfiniteTalk的完整技术实现已通过开源形式对外发布，包括论文、代码库以及预训练模型权重，为学术研究和技术开发者提供了宝贵的参考资源。