2024年12月12日星期四

AI绘画,ComfyUI中的Flux版本使用方法,ComfyUI教程

Flux模型可以说是AI绘画领域的一次里程式的重大飞跃,它的重要性和SD1.5比起来毫不逊色,绝对值得大家去尝试。

目前 Flux 的官方一共提供了 Pro、Dev、Schnell 三个版本大模型。

pro高端版本,能力最出众,但它仅通过API访问,无法下载到本地。

普通人能够加载到本地使用的是 Dev 和 Schnell 版本。

Dev 版出图效果比 Schnell 要好,出图步骤在20步以上,但不能商用。

Schnell 可以看作是加速版,4步就可以出图,出图的质量也不错,可以商用。

Flux 模型出自"黑森林"团队,由前 stabilityAI成员创建,它的的优点十分明显,训练参数高达12GB(120亿)参数,它的图片质量高,各种宽高比,特别是解决了AI绘画软件画手的痛点。

不过Flux模型体积比较大,加载起来慢,对硬件要求也特别高。

ComfyUI中的Flux版本使用方法

1、普通完整版(16G以上显存使用)

适合追求最佳图片质量,而且硬件配置比较高的用户,显存要达到16G以上。

单个模型达到20G以上,需要配套独立的 CLIP、vae文件使用。

模型文件放置路径:models/unet

clip文件放置路径:models/clip

vae文件放置路径:models/vae

flux普通完整版取消了负面提示词和CFG的使用

"Clip文本编码器 Flux"的使用方法:

它分为上下两个部分,上部是 Clip 提示词,下部是 T5提示词。

Clip提示词和以前的StableDiffusion 1.5 版本的提示词使用方法一样,使用关键词,用英文逗号进行分割。

T5提示词可以直接使用自然语言,可以在里面直接输入一段完整的话来描述画面。

你可以单独使用 Clip提示词或单独使用T5提示词,也可以同时使用。

因为Flux可以同时使用 Clip 提示词和自然语言提示词来控制画面,所以画面的还原度更高。

2、简单易用的 FP8 Checkpoint 版(12G以上显存使用)

FP8版本使用起来方法简单,出图质量好,而且速度还快。

使用FP8版本时,用ComfyUI自带的 Checkpoin 加载器就能使用。

这个版本集成了 clip 和 vae

模型文件放置路径:models/checkpoints

3、更快的 bnb_NF4 版(12G以下显存使用)

推荐12G以下显存使用,单个文件11G了。

NF4版本集成了 clip 和 vae,

它的速度比FP8版本还要快,使用的时候需要安装 ComfyUI bitsandbytes_NF4节点。

以上就是今天的内容,明天我们讲一下 GGUF 工作流的搭建。

END




感谢您的阅读,麻烦点个赞+在看吧!

没有评论:

发表评论

免费声音克隆并生成双人对话的工具整合包MOSS-TTSD,可以克隆两个人的音色,并生成两个人的对话音频,适用于播客、访谈等场景

AI应用帮,帮你用AI 公众号:AI应用帮 「   文中提供获取方式   」 ▼ 本期 带 来 声音克隆并生成双人对话的工具整合包   — —   MOSS-TTSD MOSS-TTSD(Text to Spoken Dialogue) 是由清华大学语音与语言实验室联合 Te...