MagicAvatar 的替代品
5 个可以替代 MagicAvatar 的工具,1 个可完全替代、3 个部分替代,1 个在国内不能直接访问、归在最后。费用、登录、平台与可访问性都是本站实测或从官网核对的。
M
MagicAvatar
magic-avatar.github.io
字节跳动 2023 年公布的多模态虚拟人研究框架,能把文本描述或源视频转成动作信号,再驱动指定形象生成动画,论文与代码公开,适合做动作生成、视频合成的研究者复现或在此基础上改。
工具英文
对比
| 条目 | 费用 | 登录 | 平台 | 国内可直接访问 | 一句 |
|---|---|---|---|---|---|
| OOmniHuman-1 | — | — | 网页 | 待检测 | 同为字节开源的人体视频生成研究项目,代码公开可复现,且音频驱动已可用 |
| EEchoMimic | — | — | — | 待检测 | 替代多模态驱动这一块:开源肖像动画,音频或关键点驱动静态人像,需自配环境 |
| — | — | 网页 | 待检测 | 替代研究复现这一块:微软开源音频驱动人脸视频,只覆盖说话场景,无文本动作生成 | |
| 免费 | 不用登录 | Linux · Windows | 待检测 | 替代唇形同步这一块:开源可本地跑,只改嘴型,不涉及动作信号与形象驱动 | |
| 免费 | 不用登录 | Linux · Windows | 不可以 | 替代视频合成这一块:开源照片加音频生成说话视频,但只做口型不做全身动作 |
详细介绍
可完全替代 1
部分替代 3
E
EchoMimic
蚂蚁集团支付宝终端技术部开源的肖像动画生成项目,可用音频、面部关键点或两者结合驱动静态人像生成口型与表情同步的视频,需自行配置环境、下载权重再推理,适合能跑模型的研究者与开发者。替代多模态驱动这一块:开源肖像动画,音频或关键点驱动静态人像,需自配环境
VASA-1
微软研究院的音频驱动人脸视频生成研究项目,输入单张照片和一段语音,实时生成口型与表情同步的说话视频,页面只提供论文与演示,适合做虚拟人、数字主播的研究者了解技术路线。替代研究复现这一块:微软开源音频驱动人脸视频,只覆盖说话场景,无文本动作生成
MuseTalk
腾讯音乐 Lyra Lab 开源的音频驱动唇形同步模型,输入人脸视频和音频即可改嘴型对齐,支持中英日等多语,在 NVIDIA 显卡上可实时推理,适合有深度学习基础的开发者在本地给虚拟人视频配音。替代唇形同步这一块:开源可本地跑,只改嘴型,不涉及动作信号与形象驱动
国内不可直接访问 1