2025年9月23日星期二

开源免费!阿里Wan-Animate发布:统一角色动画,直接把人“换”进视频

前两天刷视频时,我突然看到有人用一张静态照片,把自己"搬"进了某个明星的舞蹈视频里——动作、表情一模一样,连灯光和环境都融得自然。

图片

点击蓝字关注我吧!

前两天刷视频时,我突然看到有人用一张静态照片,把自己"搬"进了某个明星的舞蹈视频里——动作、表情一模一样,连灯光和环境都融得自然。第一反应是:又是哪家AI的黑科技?结果一看,出自阿里巴巴通义实验室的新模型 Wan-Animate。不得不说,这波真的有点东西。

图片

一个模型,两种玩法

Wan-Animate的定位很直白:让角色"动"起来,甚至直接替换掉原视频里的角色。它有两个模式:

  • 动画模式:给模型一张图片,再加一个参考视频,它就能学着参考视频里的人物表情和动作,把你的角色动起来。比如给它一张卡通形象,配上某个舞蹈片段,马上能得到一个跟着跳舞的卡通版。

  • 替换模式:直接把角色"丢"进原始视频里,替换掉原角色,还能自动适配环境光照,效果看起来就像本来就是那个人在现场表演一样。

说白了,就是 复制动作 + 角色换脸 的超级融合版。以前可能得用好几个工具,现在一个模型就搞定。

技术上的"小心机"

阿里这次不只是做了个"换壳"模型,而是动了不少脑筋:

  • 统一输入框架:把参考图像、视频时序、模式选择全塞进一个统一符号体系里,减少训练偏移。简单理解就是,喂给模型的东西更有条理,它学得也更聪明。

  • 双重控制:动作和表情分开走。身体动作靠骨架对齐,表情则直接从视频里提取面部特征。这让动画不再死板,表情和动作都能对上。

  • 光照LoRA模块:替换模式下,环境光照能自动补齐。比如原视频是昏暗舞台灯光,你的角色也能自动染上那种氛围,避免"贴图感"。

这几点,确实解决了传统角色动画里"表情僵硬""换脸不自然""光照穿帮"的痛点。

实测效果:高保真 + 高灵活

从公开的演示视频来看,Wan-Animate的效果有点惊艳。

  • 角色动作几乎一比一还原,尤其是舞蹈片段,肢体细节都很到位。

  • 替换模式下,角色与背景环境的融合度高到不像后期,而更像真的现场拍摄。

  • 分辨率适配也很灵活,从竖屏短视频到横屏电影画幅都能处理。

当然,吹爆的同时也得冷静——我试了下体验版,对输入素材的要求还是挺挑的:视频大小要在200MB以内,时长2-30秒,分辨率也有上下限。太随意的素材可能效果一般,尤其是动作特别快或者画面特别暗的片段。

用在哪些场景?

我觉得这东西对创作者来说,简直就是"万能插件":

  • 影视制作:经典场景复现,或者把一个角色替换成不同风格的人物。想象一下,用动漫角色重演电影桥段?

  • 广告创意:模特随时换,场景风格秒切换,省掉大半拍摄成本。

  • 短视频内容:舞蹈挑战、搞笑换装,随便玩都自带流量属性。

  • 数字人/虚拟偶像:想打造一个个性化虚拟IP?这下有了标准化工具。

可以说,从商业到娱乐,Wan-Animate都有落地可能。

图片
图片


优点与不足:真实体验

优点就不用多说了,最核心的还是"统一":一张图+一个视频,就能产出高质量动画,不需要复杂的流程组合。

不足主要有两点:

  1. 素材门槛:对输入视频的分辨率、时长有硬性限制,不像一些轻量模型能随便丢素材进去。

  2. 算力要求:虽然模型开源,但想要跑流畅、出高质量结果,得有不错的显卡。不然可能要靠云端体验。

干货总结

如果你是创作者,Wan-Animate能帮你做的就是:

  • 节省时间:动画、替换一步到位。

  • 提升效果:表情自然、光照融合,成片更像真拍。

  • 拓展玩法:影视、广告、短视频、虚拟人,各种场景自由玩。

不足之处在于:素材要合规、设备要跟得上。

一句话:Wan-Animate不是"玩具",更像是专业创作者的加速器。

我的感觉是:这东西很可能会成为短视频圈的新宠儿。以前"跟跳舞蹈挑战"靠的是体力,现在可能只需要一张照片。你敢想象下个月的抖音、B站会被多少"AI替身舞者"刷屏吗?

项目地址:https://humanaigc.github.io/wan-animate/

图片

如果您想在comfyui使用Wan2.2-Animate请阅读下面的文章,或者进入我们的星球!

AI商业实战社群

后台给我回复"加入社群"即可!

图片
图片

没有评论:

发表评论

开源免费!阿里Wan-Animate发布:统一角色动画,直接把人“换”进视频

前两天刷视频时,我突然看到有人用一张静态照片,把自己"搬"进了某个明星的舞蹈视频里——动作、表情一模一样,连灯光和环境都融得自然。 点击蓝字关注我吧! 前两天刷视频时,我突然看到有人用一张静态照片,把自己"搬"进了某个明星的舞蹈视频里—...