7月31日,黑森林Black Forest Labs (BFL) 发布了一个自称最佳Flux模型。,Flux官方 Black Forest Labs 开源了新模型 FLUX.1-Krea [dev],但这个模型其实是和 krea_ai 联合开发的,准确地来说,这个模型是 Black Forest Labs 给 krea_ai 提供了原始Flux预训练模型,然后krea_ai 在此基础上进行后训练,包括SFT和RLHF。这是目前最好的开源权重 FLUX 模型,专为文本到图像生成而设计。
该模型的原始版本大小约为23GB,因此显存(VRAM)较低的用户将无法运行。您可以等待社区推出fp8或GGUF优化版本(不过实测12G显存的3060可以跑起来,一张1280的高清图约需2分钟)。
默认的weight_dtype参数设置为fp8_e4m3fn_fast格式,以降低初次使用门槛。
- 若您拥有充足显存(例如配备24GB显存的RTX 4090显卡),可将weight_dtype设为default以获得更佳生成质量。
- 模型开源地址:https://huggingface.co/black-forest-labs/Flux.1-Krea-dev
模型特点:
Flux.1 Krea Dev 是专为文本到图像生成设计的开源模型,继承了 FLUX.1 [dev] 的强大架构,同时进行了优化,带来以下核心优势:
- 独特美学风格:生成的图像避免了常见的“AI 感”,呈现出独特的艺术审美。
- 自然细节表现:避免过曝高光,细节处理细腻,贴近真实。
- 卓越真实感:图像质量极高,逼真度令人惊叹。
- 完全兼容性:与 FLUX.1 [dev] 架构无缝对接,易于集成。
许可说明:该模型遵循 flux-1-dev-non-commercial-license
许可,仅限非商业用途。
ComfyUI 工作流程配置
以下是在 ComfyUI 中使用 Flux.1 Krea Dev 生成图像的详细步骤,涵盖模型下载、文件配置以及运行验证。
1. 获取工作流程文件(文末网盘下载)
您需要先下载工作流程文件以在 ComfyUI 中加载:
为确保工作流程顺利运行,需要下载以下模型文件,并将其放置在正确的目录中。
扩散模型
- 推荐模型:
flux1-krea-dev_fp8_scaled.safetensors
适合低显存设备。 - 高质量模型:
flux1-krea-dev.safetensors
需要更多显存,如 24GB,适合追求极致画质。 - 注意:下载
flux1-dev.safetensors
前,需同意black-forest-labs/FLUX.1-Krea-dev
协议。
文本编码器
clip_l.safetensors
t5xxl_fp16.safetensors
(推荐显存 > 32GB)。t5xxl_fp8_e4m3fn.safetensors
(低显存设备优化)。
变分自编码器(VAE)
ae.safetensors
。
文件存储路径
将下载的文件放置在以下目录结构中:
ComfyUI/
├── models/
│ ├── diffusion_models/
│ │ └── flux1-krea-dev_fp8_scaled.safetensors 或 flux1-krea-dev.safetensors
│ ├── text_encoders/
│ │ ├── clip_l.safetensors
│ │ └── t5xxl_fp16.safetensors 或 t5xxl_fp8_e4m3fn.safetensors
│ ├── vae/
│ │ └── ae.safetensors
提示:如果之前使用过其他 Flux 工作流程,上述部分模型(如文本编码器和 VAE)可能已存在,无需重复下载。
注意事项
- 低显存用户:如果设备显存不足(如低于 24GB),建议优先使用
flux1-krea-dev_fp8_scaled.safetensors
模型,以确保流畅运行。 - 模型优化:社区可能后续推出更轻量化的 FP8 或 GGUF 版本,适合低配设备。
- 协议合规:下载模型前,请确保已阅读并同意相关许可协议。
总结
Flux.1 Krea Dev 凭借其独特的美学风格和卓越的图像质量,成为开源文本到图像生成领域的佼佼者。通过上述步骤,您可以在 ComfyUI 中轻松配置工作流程,生成令人惊艳的图像作品。无论是艺术创作还是设计探索,这款模型都将为您带来无限可能!