AniPortrait
AI 视频 · 视频生成 完全开源免费 / 开源协议

AniPortrait

腾讯开源的高质量音频与肖像驱动框架,生成极高自然后续动作与面部肌肉物理形变。

工具好评率 100%
41 人参与评价

免费额度与规则说明

腾讯联合科研团队开源,支持单张人像照片结合音频信号或动作骨骼生成超自然面部肌肉变形与高保真视频。

功能深度解析与特色

AniPortrait 是由腾讯游戏 AI 团队联合多所高校科研机构开源的前沿肖像动画生成框架。与以往仅能驱动静态面部下巴的简单算法不同,AniPortrait 深度攻克了“从静态人像生成高质感、高时间一致性人物动态”的核心技术难题。框架分为两个关键阶段:第一阶段利用自研的 Audio2Lmk 模块从音频输入中提炼出三维人脸关键点与密集骨骼网格;第二阶段将这些动态特征结合扩散模型(Diffusion Model)与时序注意力模块,不仅能够完美复刻语音中的每一个微妙音素发音口型,还能赋予人像极其自然的头部空间转动、呼吸节律与上半身肢体微动。此外,AniPortrait 还支持双重驱动模式——既可以通过纯音频(Audio-driven)驱动说话,也可以通过姿态视频(Pose-driven)精确控制面部表情与动作,为虚拟数字人、游戏剧情过场与 AI 电影创作提供了高保真开源基础。

小可实测优缺点评估

优势亮点

  • ✓ 双重驱动模式,既支持通过纯音频自动生成数字人,也支持通过动作骨骼视频精确控制
  • ✓ 基于扩散模型生成,画面细腻逼真,完美保留皮肤毛孔质感与背景稳定性
  • ✓ 全量开源代码与预训练权重,便于深度定制、二次开发并无缝整合进 ComfyUI 生态

注意事项与限制

  • ✕ 扩散模型逐帧去噪生成机制较重,生成长视频对本地显存和计算时间有较高要求
  • ✕ 需要本地配置独立的 Python/PyTorch 开发环境并下载多项基础预训练权重组件

准备好上手体验了吗?

点击下方按钮前往官方平台立即开启探索。

打开 AniPortrait ↗

同类功能替代品推荐

💬 交流与问答

GitHub Powered