FLUX 3 Image Klein 开源:5.6B,int8 能塞进 8GB 显存,这本来是他们 API 背后的那个模型

BFL(Black Forest Labs)在 Hugging Face 挂出了 black-forest-labs/flux-3-image-klein-comfy,一个专门为 ComfyUI 重新打包的 FLUX 3 Image Klein 模型仓库。单看数字会有错觉:5.6B 参数,在现在动辄几百 B 的图像模型讨论里显得有点「小」。但这个名字里 Klein(德语「小」)其实点破了它的定位——它不是靠堆参数量换惊艳,而是把一堆本分散在几条管线里的活,硬塞进一个 checkpoint 里。

FLUX 3 Image Klein 是开放权重模型,主打文本生成图像和图像编辑。关键在这个「一个模型包办」的动作:纯文本生图、单参考图编辑、多参考图组合,全都走同一个模型,文本编码器用的是 Qwen3-VL-4B-Instruct。注意,5.6B 这个数字只指图像 transformer,文本编码器是单独的一块,别混在一起算显存账。

所以这次的仓库才值得单独看:它把 distilled 和 base 两个 checkpoint,各自按 BF16、int8、NVFP4 三种精度重新打包,配齐了文本编码器和 prompt upsampler,直接扔进 ComfyUI/models 对应的文件夹就能用。对自托管的人来说,这等于省掉了一大段「自己拼装、反复对不上文件格式」的折腾。

更实际的一点在跑分之外:int8 版本能在 8GB 显存的卡上跑,官方点名了 RTX 3070,以及没有 FP8 支持的 RTX 30 系和更老的卡。NVFP4 则要 Blackwell 级别的 GPU。换句话说,一个普通人的消费级显卡就能把编辑、多参考组合这些以前得上云或者得租卡的活,搬到本地跑。而 distilled 的 Klein checkpoint,官方说得很直接——它就是 BFL API 背后那个 checkpoint,16 步、无 guidance;base 版本则适合微调、LoRA 训练和研究,50 步、CFG 3.5。

用起来的要求,比想象中苛刻一点

别被「开源 5.6B」冲昏头,模型的脾气有一个硬前提:必须配 prompt upsampler,否则别用。 它吃的是整段的场景描述——构图、主体、背景、光线全都要写进去,你丢一句短提示,它会还你一句泛泛的白开水输出。官方仓库里配了自己的 upsampler(qwen3.5_9b_flux3_prompt_upsampler_int8_convrot.safetensors),也允许你自己接任意 LLM 加系统提示词来做这件事。编辑模式下,upsampler 会把「指令 + 参考图」揉成一整段完整描述再来生成。

另一处有意思的设计是 bounding box。你可以在 0 到 1000 的网格里用框指定元素的位置和大小,然后通过 prompt 去改色、移动、替换、移除。但官方自己标注了局限:框只是「引导」位置和尺度,不是硬 mask,元素可以伸出框,太小的元素可能干脆不出现,编辑还会改动框外的内容。也就是说,它给的是「构图意图」的表达能力,做不了像素级的精确切割。

文件大小也透明得很——都列了表。BF16 的 distilled/base 各 11.1GB,int8 各 5.8GB,NVFP4 各 5.3GB;文本编码器 qwen3vl_4b BF16 8.9GB、int8 4.9GB;upsampler int8 9.8GB;autoencoder 只有 0.3GB。想本地跑,int8 这一套是最省显存的组合,下载命令官方也直接给了。

许可证不是「随便用」

最后得说清楚边界。FLUX 3 Image Klein 走的是 FLUX Kommunity License v1.0:允许非商用使用,「符合资格用户」可以商用输出,门槛是(含关联公司)年化毛收入低于 500 万美元。这算是一个留了口子的商业例外,但请别把它理解成「拿到就能随便微调商用」。许可证第 4 节的限制里明确排除了军事用途、监控(含相关研发)、生物识别处理,以及禁止用本模型去改进功能与 FLUX 模型类似的另一个模型。

Qwen3-VL-4B-Instruct 和 prompt upsampler 各自走 Apache-2.0,这是它们自己的许可证,和 FLUX 主模型分开算。BFL 在负责任 AI 那块也提到发布前做了 CSAM 和非自愿私密图像等风险的评估,并留了一个安全报告邮箱。

一个 5.6B 的模型能同时做文本生图、多参考编辑和框选构图,还能量化到消费级显存本地跑,这本身就是个信号:这一类「全能型」小模型的本地可及性正在被认真对待。当然,仓库目前的下载量还很低(上月 39 次),说明它刚晾出来,生态和踩坑经验都还在早期。要不要尝鲜,取决于你的显卡显存,以及你愿不愿意先接受「必须过一遍 upsampler」这个前提——这才是这模型真正要过的第一道门槛。

相关链接

  • FLUX 3 Image Klein(ComfyUI 打包仓):https://huggingface.co/black-forest-labs/flux-3-image-klein-comfy
  • FLUX 3 Image Klein(原始权重仓):https://huggingface.co/black-forest-labs/flux-3-image-klein
  • GitHub 推理代码与 bounding box 格式:https://github.com/black-forest-labs/flux-3-image-klein
  • FLUX Kommunity License:https://huggingface.co/black-forest-labs/flux-3-image-klein-comfy/blob/main/LICENSE.md
  • BFL 官方发布博客:https://bfl.ai/blog/flux-3-image-klein