大家好,我是X小鹿。

去年写过一篇文章,分享了 6 个可以一键替换视频人物的 AI 工具:

分享6个可以一键替换视频人物的AI工具!(建议收藏)

其中就有阿里当时火遍全网的「全民舞王」,当时朋友圈要被这些视频刷爆了。但现在再来看当时做的这些视频,确实会有些 AI 痕迹和不自然。

最近,阿里又放大招,通义万相发布了全新的动作生成模型 Wan2.2-Animate,效果再一次升级。

先来看下官方演示视频:

官方示例.gif

可以看到,它不仅能精准地实现动作模仿,还能精确复制表演者的面部表情、实现精准的肢体控制。

图片图片

在进行角色替换时,也能无缝与周围环境集成,自动匹配光照和色彩。

一、Wan2.2-Aniate 介绍

Wan2.2-Animate,业内首个专注于人物角色驱动的开源模型。

Wan2.2-Animate 有两大核心模式:

模式一:动作模仿(Move)

上传一张角色照片 + 一段动作视频,就可以让静态角色在保持原图片背景不变的情况下,精准复刻视频中的动作和表情。

模式二:视频换人(Mix)

上传一张角色照片 + 一段动作视频,就可以在保留原视频动作、表情与环境的情况下,让图片中的角色无缝融入视频、替换视频中的角色,同时还能自动匹配光照和色彩。

二、如何体验 Wan2.2-Animate

1、在线体验

Wan2.2-Animate 目前在「通义万相」官网就可以体验。

通义万相(国内站):

tongyi.aliyun.com/wan/

打开通义万相官网,选择「数字人」-「角色替换」/「动作模仿」,上传「角色照片 + 视频」即可体验。

图片

通义万相(国际站):

wan.video/

选择「Avatar」-「Photo Animate」,上传「角色照片 + 视频」即可体验。

图片

另外在 HuggingFace 上也可以在线体验:

huggingface.co/spaces/Wan-…

图片

2、开源地址

Wan2.2-Animate 目前已经开源了。有开发需求的小伙伴也可以在 Github、魔搭社区或 HuggingFace 下载体验。

GitHub

github.com/Wan-Video/W…

魔搭社区

modelscope.cn/models/Wan-…

HuggingFace

huggingface.co/Wan-AI/Wan2…

三、应用场景

Wan2.2-Animate 模型不仅支持驱动人物,也可以驱动卡通动漫形象和动物等多种角色,支持全身、半身、特写。

这项技术的应用场景还挺多的。比如:

在影视制作中,可以用这种方式,快速替换主演或特技演员。

在短视频创作领域,用户可以用这种方式,用自己或自己喜欢的形象,快速复刻网络上的热门舞蹈、电影片段或搞笑视频。

在游戏或动漫制作领域,也可以用这种方式,让静态角色根据参考视频,快速「动」起来,不仅能降低制作成本,还能大大提高时间效率。

以上,就是今天的分享,感兴趣的可以试试。

如果觉得有用,记得点个赞再走呀~


推荐阅读

2024年终AI工具汇总:9大AI领域,70+精选AI工具,全都在这了!(建议收藏)

更多 AI 工具见【AI工具】专栏,持续更新中。

我是程序员X小鹿,前互联网大厂程序员,自由职业3年+,也是一名 AIGC 爱好者,欢迎一起交流~

本站提供的所有下载资源均来自互联网,仅提供学习交流使用,版权归原作者所有。如需商业使用,请联系原作者获得授权。 如您发现有涉嫌侵权的内容,请联系我们 邮箱:[email protected]