刷推特看到一个外国网友制作的让世界名画人物动起来的创意视频,感觉很有意思,于是也尝试使用中国古代名画《韩熙载夜宴图》的韩熙载走出画面,分享下大体的步骤:1、用 谷歌Nano-banana 把古画转换成现代场景和人物,基本提示词:"把古画中的场景还原成真实现实的场景,人物还原成写实和现代的人物,人物外貌和动作要保持一致",这可能需要抽卡,其实仔细看这还原的也并不完美,鞋子没了,大的团扇也变成了斗笠,好在主要人物形象还比较满意。你可能也发现了原图是带水印的,Nano-banana去水印也是一把好手~2、人物在现实场景中遛弯的图片,同样是用的Nano-banana,除了上面生成的写实的图片,再给一张现实场景的图片,然后让中间的人物走在图片2中的路上。如果不给现实图片,只是指定场景,好比我想让他走在青岛五四广场上,就会给出一些似是而非的画面。另外如果从坐姿图不能一步到位换到指定的场景图片上,也可以先把人物生成在任意场景,然后再从生成的场景中把人物迁移到指定的场景图中。3、首尾帧视频,从古画变到写实场景的视频,一种比较简单直接的方法就是用剪映的转场,另一种就是做首尾帧视频,于是我先使用Wan2.2的首尾帧视频尝试了一下,抽了几次卡都是比较生硬,有些硬切的感觉,古画部分的动画太少。然后也尝试了下可灵2.1的首尾帧效果,其实可灵过渡更加自然,相当于前后两段都比较均衡的参与,只不过尾帧视频的差别会感觉比较违和。于是我又尝试了另一种方案,先把古画部分用图生视频动起来,然后选取合适位置的静帧作为首帧,写实风格的古画作为尾帧,用Wan2.2生成首尾帧视频。4、图生视频,剩下的部分就很简单了,把写实风格的古画生成视频就可以跟前面的连接起来,只需要提示词让男人走出画面,Wan2.2图生视频一次性就抽卡成功了,最后在广场溜达的视频同样。用到的工作流(生成视频更推荐海外版,无AI水印):谷歌Nano-banana:https://www.runninghub.cn/post/1960507476082831361?inviteCode=3a31eec9
>>>小程序直接体验 谷歌Nano-banana
Wan2.2首尾帧视频:https://www.runninghub.cn/post/1952174631509766145?inviteCode=3a31eec9
Wan2.2图生视频:https://www.runninghub.cn/post/1950366972690219009?inviteCode=3a31eec9
Wan2.2首尾帧视频(海外版):https://www.runninghub.ai/post/1962153042235867137?inviteCode=rh-v1228
Wan2.2图生视频(海外版):https://www.runninghub.ai/post/1962404122571968514?inviteCode=rh-v1228
没有评论:
发表评论