我是阿木易,一个啥都会点的设计师🎨,正在研究AI编程,想自己造点不一样的东西。👀又到年底了,AI大厂们又开始扎堆放大招。
我是阿木易,一个啥都会点的设计师🎨,正在研究AI编程,想自己造点不一样的东西。👀
又到年底了,AI大厂们又开始扎堆放大招。
从去年年底OpenAI的Sora惊艳亮相,到最近可灵O1开放,再到前两天Runway发布Gen-4.5——AI视频这个赛道,肉眼可见地卷起来了。
文字和图片那边,AI已经基本达到了"能用"的水平。现在,终于轮到视频了。
今天这篇,我想跟你聊聊Runway刚发布的这个新模型Gen-4.5。它升级了什么、有什么坑、我们现在要不要关注——我尽量一篇讲清楚。
先说背景:Gen-4.5是个什么东西
Runway这家公司,做AI视频生成已经好几年了。两年前他们发布的Gen-1,是第一个面向公众开放的视频生成模型,算是开创了这个品类。
这次的Gen-4.5,是他们目前最强的模型。
有多强呢?在Artificial Analysis的Text to Video排行榜上,Gen-4.5现在排第一,1247分的Elo评分,超过了所有其他模型。
当然,排行榜这东西你也知道,看看就行,实际好不好用还得看具体表现。
3个核心升级点
我仔细看了官方介绍和一些早期用户的反馈,Gen-4.5主要有这三个升级:
1. 物理真实感大幅提升
这是我觉得最值得说的一点。
以前AI生成的视频,最大的问题就是"假"——物体运动不符合物理规律,看着就觉得哪里不对劲。
Gen-4.5在这方面下了功夫。官方说法是:物体运动有了真实的重量感和动量感。液体流动更自然,表面细节渲染更精细,甚至头发丝和布料纹理在运动过程中都能保持连贯。
简单说就是,看起来更像真的了。
可以看到上面山羊走路时的重量感,真的太真实了
当然,你要是想让它"无视"物理规律搞点创意效果,也可以,它支持这种自由度。
2. 能理解复杂的指令了
这个升级对内容创作者来说挺实用的。
以前用AI生视频,你得把指令拆得很细,一步一步来。现在Gen-4.5可以理解更复杂的连续指令——你可以在一段话里同时告诉它:镜头怎么移动、场景怎么布置、天气怎么变化、人物怎么走动,它都能在一个视频里实现。
这有点像你在跟一个理解力更强的助手沟通,不用再一点一点喂信息了。
对于想做复杂镜头调度的人来说,这确实是个效率提升。
3. 控制方式更全面
除了最基础的"文字生视频",Gen-4.5还支持:
图片转视频:给它一张静态图,它能让画面动起来
关键帧控制:你可以指定某些时间点的画面必须长什么样
视频转视频编辑:在已有视频基础上做修改
这些功能其实可灵O1也有,算是现在AI视频工具的标配了。但Runway把它们都整合到了Gen-4.5里,用起来会更方便一些。
3个官方都承认的坑
说完升级,得说说问题。
有意思的是,这次Runway官方自己在介绍文档里列出了模型的局限性。这倒是挺少见的,一般厂商发新品都是使劲吹,很少主动说自己的短板。
他们提到了三个问题:
1. 因果推理会出错
什么意思呢?就是效果有时候会跑到原因前面。
比如你让它生成一个"按下门把手,门打开"的镜头,它可能会生成"门先开了,然后才按门把手"。顺序给你搞反了。
这种问题在逻辑性强的场景里会比较明显。
2. 物体会凭空消失
这是AI视频的老毛病了,Gen-4.5也没完全解决。
一个物体被其他东西挡住之后,再出来的时候可能就不见了。比如一个杯子被手遮了一下,手移开之后杯子没了。
专业术语叫"物体持久性"问题,说白了就是AI的"记性"还不够好。
3. 成功偏差
这个问题挺有意思的。
官方举的例子是:一个明显踢歪了的球,在视频里还是进了。
就是说AI倾向于让动作"成功",即使按物理规律来说应该失败。如果你想生成一些"失败"的镜头,可能得多试几次。
我们现在需要关注吗?
说实话,我觉得可以关注,但不用着急上手。
第一,工具还在逐步开放。 Gen-4.5目前还在灰度放量,不是所有人都能用上。等它全量开放了再去体验也不迟。
第二,AI视频工具现在处于"能看但未必能用"的阶段。 生成一些demo、做做创意尝试没问题,但要真正用到工作流里,可能还得再等等。上面说的那几个坑,在实际使用中会更明显。
第三,竞争很激烈,不用急着站队。 可灵O1也刚开放,字节那边据说也有动作。现在选哪个工具都不晚,甚至再等几个月,可能会有更好的选择。
AI视频这个领域,确实在加速发展。从去年Sora刷屏,到今年各家扎堆发新模型,能明显感觉到技术在往前跑。
但作为普通用户,我觉得没必要太焦虑。
这些工具终归是工具,关键还是看你想用它做什么。 如果你本来就做视频内容,可以开始关注和尝试了;如果只是吃瓜看热闹,知道有这么个东西就行。
Runway Gen-4.5确实是目前AI视频的第一梯队。升级也是实打实的,不足也是实打实的。
等它全量开放了,我再找机会实际测一测,到时候再来跟你聊聊真实的使用感受。
好了,今天的分享就到这儿啦~
往期精选:
没有评论:
发表评论