这两天测试了下 FramePack，感觉真的太强了！最直观的感受就是能够快速抽卡长视频，或许整体还达不到可灵1.6的水平，但是让开源图生视频真的有一战之力了。
以下是个人感觉的一些优点：
• 视频稳定性和人物一致性相当高，很多时候就是一次性抽卡能用的视频，之前无论混元还是wan2.1基本就是靠运气抽卡。
• 生成的时候每秒都会生成一个预览视频，要崩了可以直接停止生成，及时止损。
• 真的可以生成稳定的长视频，之前玩wan2.1，我4090D生成个5秒16帧的尺寸大一点都动不动爆显存，这可以直出720p的30帧的长视频。
现在的缺点是视频的背景基本是静止的，再就是提示词的遵从性感觉还不是很高。
一、关于 FramePack
FramePack 是由 ControlNet 作者张吕敏开发的开源视频生成工具，基于腾讯混元模型，能让普通用户仅需 6GB 显存的消费级显卡即可生成长达 1 分钟的高质量动态视频，彻底打破专业视频制作对高端硬件的依赖。
技术亮点：
超低显存需求：最低仅需 6GB 显存，可在 RTX 3060 等消费级显卡上生成 1 分钟（1800 帧）视频。
抗漂移采样：通过双向采样机制防止长视频画面偏离主题，提升连贯性。
上下文压缩：动态调整历史帧的压缩率，固定输入上下文长度，实现显存消耗与视频长度无关。
实时预览：逐帧生成过程中可查看阶段性结果。
项目网址：https://github.com/lllyasviel/FramePack
二、FramePack 使用方法大全
分别介绍Windows下使用的FramePack的三种方法，分别是官方一键包、第三方一键包和ComfyUI的使用方法。
1、官方一键包
敏神提供了Windows下的一键包，可以直接运行使用，优势就是可以及时更新，模型之类的需要在线下载。
下载地址：
https://github.com/lllyasviel/FramePack/releases/download/windows/framepack_cu126_torch26.7z
https://pan.quark.cn/s/3ba781adb0a8
下载解压后，先运行update.bat更新，再运行run.bat即可，如果运行报错可以先用管理员运行environment.bat。
参数详解：
Use TeaCache：使用 TeaCache 加速
Total Video Length ：设置生成的总时长
Steps：采样步数，建议25-30
Distilled CFG Scale：提示词遵循程度，默认值 10，范围在 1 - 33
GPU Inference Preserved Memory ：GPU 推理保留内存。小显存就调高这个值，但是生成速度会更慢。
MP4 Compression：用于控制生成视频的压缩程度，数值越低，视频质量越好（0 表示未压缩），若输出视频出现黑屏，可尝试将该值改为 16。
在outputs目录中，会每秒生成一个片段，可以根据片段的预览来决定是否继续生成。
2、第三方一键包
这里以刘悦大佬的一键包为例，基本是基于官方的一键包制作，只不过模型之类的都包含了，不需要在线下载。
下载地址：
https://pan.quark.cn/s/10a955aa4e91
使用方法跟官方一键包基本类似。
写了两天，今天汤团猪大佬又实现了首尾帧的功能，可以使用T8大佬的一键包：
https://pan.quark.cn/s/9e0a89fdef81
首尾帧图片的连贯性如果比较差，大概率就会是直接跳转到第2张图片，但是视频的质量依然相当稳定。
3、ComfyUI中运行
KJ大佬在第一时间就支持了在ComfyUI运行，项目地址：
https://github.com/kijai/ComfyUI-FramePackWrapper
使用方法：
① 定位到custom_nodes目录克隆项目，运行
git clone https://github.com/kijai/ComfyUI-FramePackWrapper② 安装依赖
进入到ComfyUI-FramePackWrapper目录，运行
python目录\Scripts\pip.exe install -r requirements.txt③ 下载模型，并放置到各自的目录
模型下载地址：
https://pan.quark.cn/s/89256825efc0
然后按照下图结构放置到对应的目录
④ 把工作流拖进去即可使用了,工作流也在上面的网盘中。
如果运行报错可以使用DeepSeek、豆包等查找下，根据步骤来大多数都能解决报错问题。
4、在线运行
RunningHub上也已经好了很多工作了，如果本地电脑还是运行不了可以尝试在平台上直接运行看看
https://www.runninghub.cn/post/1913956374810951682
没有评论:
发表评论