2024年12月13日星期五

AI绘画,ComfyUI中的Flux版本使用方法,ComfyUI教程

Flux模型可以说是AI绘画领域的一次里程式的重大飞跃,它的重要性和SD1.5比起来毫不逊色,绝对值得大家去尝试。

目前 Flux 的官方一共提供了 Pro、Dev、Schnell 三个版本大模型。

pro高端版本,能力最出众,但它仅通过API访问,无法下载到本地。

普通人能够加载到本地使用的是 Dev 和 Schnell 版本。

Dev 版出图效果比 Schnell 要好,出图步骤在20步以上,但不能商用。

Schnell 可以看作是加速版,4步就可以出图,出图的质量也不错,可以商用。

Flux 模型出自"黑森林"团队,由前 stabilityAI成员创建,它的的优点十分明显,训练参数高达12GB(120亿)参数,它的图片质量高,各种宽高比,特别是解决了AI绘画软件画手的痛点。

不过Flux模型体积比较大,加载起来慢,对硬件要求也特别高。

ComfyUI中的Flux版本使用方法

1、普通完整版(16G以上显存使用)

适合追求最佳图片质量,而且硬件配置比较高的用户,显存要达到16G以上。

单个模型达到20G以上,需要配套独立的 CLIP、vae文件使用。

模型文件放置路径:models/unet

clip文件放置路径:models/clip

vae文件放置路径:models/vae

flux普通完整版取消了负面提示词和CFG的使用

"Clip文本编码器 Flux"的使用方法:

它分为上下两个部分,上部是 Clip 提示词,下部是 T5提示词。

Clip提示词和以前的StableDiffusion 1.5 版本的提示词使用方法一样,使用关键词,用英文逗号进行分割。

T5提示词可以直接使用自然语言,可以在里面直接输入一段完整的话来描述画面。

你可以单独使用 Clip提示词或单独使用T5提示词,也可以同时使用。

因为Flux可以同时使用 Clip 提示词和自然语言提示词来控制画面,所以画面的还原度更高。

2、简单易用的 FP8 Checkpoint 版(12G以上显存使用)

FP8版本使用起来方法简单,出图质量好,而且速度还快。

使用FP8版本时,用ComfyUI自带的 Checkpoin 加载器就能使用。

这个版本集成了 clip 和 vae

模型文件放置路径:models/checkpoints

3、更快的 bnb_NF4 版(12G以下显存使用)

推荐12G以下显存使用,单个文件11G了。

NF4版本集成了 clip 和 vae,

它的速度比FP8版本还要快,使用的时候需要安装 ComfyUI bitsandbytes_NF4节点。

以上就是今天的内容,明天我们讲一下 GGUF 工作流的搭建。

END




感谢您的阅读,麻烦点个赞+在看吧!

没有评论:

发表评论

AI电影一镜到底,无限时长!SkyReels-V2直接生成长视频,ComfyUI本地运行!

一镜到底、无限时长的电影级AI视频,终于可以在comfyui中通过工作流实现了。 一镜到底、无限时长的电影级AI视频,终于可以在comfyui中通过工作流实现了。 SkyReels-V2-DF模型, 突破时长限制,理论上支持无限长度的影片生成, 更适于电影叙事、多镜头运镜等长...