今天,我们再来挑战两个更具难度的场景:其中一个场景是角色手持话筒唱歌,面部部分被话筒遮挡;另一个场景是角色半身浸没在水中,镜头从水下缓缓上移,水面将人物身体一分为二。
这两个场景的难点在于:第一个场景中,角色的面部区域被话筒遮挡,比较考验模型的补全与人物一致性保持能力;第二个场景则因水面的折射、反光以及人物身体被分割,这非常考验模型能不能让人物看起来完整自然,同时真实地呈现出皮肤、水这些不同材质的样子。
主题:一个中国女歌手站在舞台前唱歌
AI很快就给出了一个有着丰富细节和运镜的高质量视频提示词
一位年轻的中国女歌手,身穿银色亮片流苏长裙,妆容精致,眼神自信而深情,红唇微启,正全情投入演唱;
场景为现代大型演唱会舞台,背景是巨型LED屏幕播放动态光影,地面铺设反光镜面,四周环绕闪烁的激光与烟雾,观众席隐没在昏暗中,营造出梦幻而热烈的氛围;
她双手轻握麦克风,身体随节奏轻微摇摆,发丝在舞台风中飘动,与光影交织互动。
人工光(LED屏与舞台灯)、硬光与边缘光结合、夜晚、中近景、中心构图、中焦距、低角度、镜头缓慢环绕运镜、高饱和度冷暖混合色调(以紫蓝与金色为主)、写实摄影风格。
感兴趣的同学可以通过下面链接获取提示词prompt
https://lxblog.com/qianwen/share?shareId=f1537e60-352c-48c1-b57b-d4ebfbda641b
2、文生视频
下面,我们要利用刚刚生成的提示词制作视频,我们有两种方式可供选择:
- 方式一:使用操作简单、小白也能快速上手的 AI 应用
- 方式二:通过更灵活、可定制的进阶工作流进行生成
无论你选择哪种方式,在打开 AI 应用或工作流后,如果尚未注册账号,请先完成注册。
你可以使用我的专属邀请码:3qo65owt
注册成功后,系统将自动赠送 1000 点积分,足够你免费体验视频生成功能。
电脑端AI应用链接:
https://www.runninghub.cn/ai-detail/1971913567182254082
手机端AI应用小程序:
打开AI应用后,输入提示词,设置好视频宽高和时长,点击下面的运行按钮,大概四五分钟后,AI视频就生成了。
通过下面的链接进入工作流页面
https://www.runninghub.cn/post/1971908206685515778
然后通过右上角的"运行工作流"按钮打开工作流。
这是工作流的完整界面。
二、WanAnimateV2:实现高保真人物身份迁移与全身动画
有了参考视频,下面我们通过WanAnimateV2实现人物的替换,同样有AI应用和工作流两种方法。
https://www.runninghub.cn/ai-detail/1975219204334948354
(2)手机端AI应用小程序:
2、工作流
链接:
https://www.runninghub.cn/post/1975189830646804481/aiDetail
如果用工作流进行操作的话也比较简单,打开工作流后,只需要修改视频的宽高、上传参考视频和参考图片就可以了(见下图红圈处)。
点击右上角的"运行"按钮,经过几分钟后,视频中的人物就替换好了。
下面看下最终生成视频和参考视频的对比(左边是参考视频,右边是生成视频),可以看出,即使人物的面部被话筒遮挡,通过WanAnimateV2工作流也能完美复现人物动作和人物表情变化,并没有因为人脸被部分遮挡而造成人脸崩坏和不自然的现象。
场景二:人物一半在水里,模型跟得上吗?
视频呈现一位女性在宁静水域中站立的场景,镜头从水下缓缓升起。画面分为水面以上和以下两个视角:
水下部分展示她的蓝色碎花裙子和腰部以上的衣物细节;
水面以上则捕捉到她微笑的脸庞与自然背景中的树木、山丘。整体氛围静谧而富有诗意,光影柔和,强调了人与自然的和谐交融。
2、文生视频
和上个场景一样,我们可以选择AI应用或工作流,配合上面生成的提示词生成参考视频。
手机端AI应用小程序:
文生视频工作流截图
生成的参考视频如下,一个女人站在水里,镜头从水面下往上抬升,符合提示词要求:
二、WanAnimateV2:实现高保真人物身份迁移与全身动画
有了参考视频,下面进入WanAnimateV2中进行人物替换。
但是意外发生了,工作流报错了!报错原因:没有检测到人脸!
我检查了一下参考视频,视频确实在前面好多帧都没有出现人脸,所以我决定重新生成一个参考视频。
这次 WanAnimateV2 工作流正确识别了参考视频中的人脸,完成了人物的替换。
不过替换完成后的视频并不完美,还存在一些小问题。
生成视频中最明显的一个问题是视频中人物腰部以下没有被替换掉。
这个问题是工作流中的智能遮罩部分没有正确识别人物造成的,视频中的人物被水面分割成了两部分,遮罩也被水面打断了,没有识别到完整的人体,所以才出现了这种情况。
----------我是分割线----------
【如何获取工作流】
END
感谢您的阅读,麻烦点个赞+在看吧!
没有评论:
发表评论