FLUX 3 Image Klein – Black Forest Labs 开源的消费级显卡图像生成与编辑模型

AI模型6天前更新 老高
34 0

FLUX 3 Image Klein是一款由Black Forest Labs于2026年10月推出的开源权重图像生成与编辑模型,把文生图、图像编辑与多参考图合成放进同一组权重完成,图像生成器参数量为5.6B,支持边界框定位与原生4K输出,适用于本地部署的图像生产。

基础信息内容
产品定位开源权重图像生成与编辑模型
出品方Black Forest Labs
发布时间2026年10月15日
图像生成器参数5.6B(不含外挂文本编码器)
最低运行门槛INT8 版本需 8GB 显存显卡
原生分辨率最高 4K
参考图上限最多 10 张
区域控制边界框定位(0–1000 网格)
开源协议FLUX Kommunity License
FLUX 3 Image Klein 官网模型页截图

FLUX 3 Image Klein 的核心能力

生成、编辑与多参考合成合并为一组权重

FLUX 3 Image Klein 的文本生成、图像编辑与多参考图合成走同一个模型,接收一段提示词与最多 10 张参考图后返回一张图像。文本编码器使用 Qwen3-VL-4B-Instruct,与图像主干分离,因此 5.6B 这一参数量只统计图像变换器部分。把生成与编辑放进同一组权重,是 AI 内容生成从多模型串联转向单模型覆盖的一个具体落点。

边界框控制排版与局部修改

FLUX 3 Image Klein 支持用边界框指定元素位置或把编辑限制在指定区域内,格式为 0–1000 的归一化网格坐标,一个提示词里可并列多个边界框。未指定框选区域的像素保持不变,适用于海报版式排布与既有素材的定点修改。

跨图像、视频、音频的联合训练信号

FLUX 3 Image Klein 建立在 FLUX 3 的跨模态学习成果之上:图像信号提供空间细节,视频信号提供运动与物理动态,音频信号提供事件与交互信息,三类信号共同参与训练。

面向消费级显卡的量化构建

官方与 NVIDIA 合作提供 BF16、FP8、INT8 与 NVFP4 四种构建。图像主干权重在 BF16 下约需 11.2GB 显存,FP8 下约 5.6GB;采用 INT8 构建时可在显存低至 8GB 的 NVIDIA GeForce RTX 显卡上原生运行。模型在 NVIDIA GB200 NVL72 上训练,并针对 TensorRT LLM、vLLM-Omni 与 SGLang Diffusion 做过适配。

base 与蒸馏双版本分别面向微调与低延迟

发布内容包含两个检查点:base 版本用于微调、LoRA 训练与研究,蒸馏版本用于低延迟的生成与编辑,官方采样步数参考为蒸馏版 16 步、base 版 50 步。权重仓库同时提供 BF16、FP8 与 NVFP4 三种变体,蒸馏版另配 INT8 构建。硬件表现上,蒸馏版配 INT8 构建生成 100 万像素图像,RTX 5090 约需 4 秒,RTX 4070 不足 9 秒;在 NVIDIA GB300 上以 NVFP4 运行蒸馏版,单张图像生成时间低于 0.6 秒,加载一个 LoRA 会增加约 5% 的生成时间。

FLUX 3 Image Klein 与同类图像生成模型的对比

对比维度FLUX 3 Image KleinQwen-Image-2.1
视觉生成组件参数5.6B约 7B(32 层 Single-Stream DiT)
原生分辨率最高 4K支持原生 2K 级(2048×2048 等)
参考图上限最多 10 张最多 10 张(多参考图编辑)
区域控制方式边界框坐标定位圈选、涂抹标注或独立蒙版
显存与部署INT8 版本需 8GB 显存取决于权重精度与推理配置,不足时可启用 CPU offload
开源协议FLUX Kommunity LicenseQwen Research License Agreement(非商业用途)

上表 FLUX 3 Image Klein 一列取自 BFL 官方发布材料,Qwen-Image-2.1 一列取自其官方仓库。差异集中在三处:视觉生成组件参数 5.6B 对约 7B;显存与部署上,Klein 的 INT8 构建 8GB 显存即可运行,Qwen 取决于精度与推理配置,不足时才需启用 CPU offload;区域控制方式,Klein 用网格坐标复现版式,Qwen 支持圈选与涂抹标注。

同价位段还可对照字节跳动的 Seedream 5.0 Flash,同样支持本地部署,可比较部署资源与生成速度。

FLUX 3 Image Klein 的应用场景与适用人群

常见场景包括:

  • 海报与版式排布:用边界框指定文字与图形位置,生成后未框选区域保持不变。
  • 既有素材定点修改:对已有图片下达指令并用边界框限定范围,只改动指定部位。
  • 多图合成:输入多张参考图与一段描述,合并为一张新图。

适用人群:需要在自有显卡上本地运行图像生成、且对数据不出本地有要求的团队与个人,以及需要确认商用授权边界的开发团队。

FLUX 3 Image Klein 的使用方法

FLUX 3 Image Klein 面向本地部署,分为通过 ComfyUI 出图与接入自有推理管线两条路径。

通过 ComfyUI 本地出图

  1. 获取权重:从 FLUX 3 Image Klein 官方模型页下载 open weights,按用途选择 base 或蒸馏检查点,并挑选与显存匹配的构建版本。
  2. 准备运行环境:确认显卡驱动版本,显存 8GB 的卡选择 INT8 构建。
  3. 加载模型并输入提示词:把检查点放入模型目录,在工作流中载入后输入完整场景描述。
  4. 按需加入边界框控制:需要固定元素排布时,在提示词中并列写出 0–1000 网格坐标的边界框。
  5. 设置采样步数并生成:蒸馏版本设 16 步,base 版本设 50 步。

接入自有推理管线

需要在服务端或既有推理框架中调用时,按所选框架接入对应构建。

  1. 选择推理框架:官方发布首日已支持 ComfyUI、Diffusers、TensorRT-LLM、SGLang Diffusion 与 vLLM-Omni。
  2. 接入提示词扩写:模型要求输入完整场景描述,直接提交简短提示词会得到泛化结果,需接入官方扩写器 flux-3-image-klein-pup。
  3. 配置微调流程:微调使用 base 检查点,Diffusers 与 Ostris 的 AI Toolkit 支持 LoRA 训练,NeMo AutoModel 提供训练配方。

FLUX 3 Image Klein 的项目地址

  • 官方发布博客:bfl.ai/blog/flux-3-image-klein
  • 官方模型页:bfl.ai/models/flux-3-image-klein
  • 权重仓库:huggingface.co/black-forest-labs/flux-3-image-klein
  • 官方 API 文档:docs.bfl.ai

FLUX 3 Image Klein 的价格与开源情况

该协议允许个人与年营收 500 万美元以下的公司免费商用,并可用于研究与非商业用途;规模更大的组织需通过官方自托管授权或 API 方式商用。

官方同步提供 API 调用方式,模型标识为 flux-3-image-klein,包含提示词扩写与像素级还原能力,1K 图像每张 0.009 美元起。软件本身不产生许可费用,实际成本取决于所选构建的算力消耗。

FLUX 3 Image Klein 的常见问题

FLUX 3 Image Klein 可以免费商用吗?

FLUX 3 Image Klein 采用 FLUX Kommunity License,个人用户与年营收 500 万美元以下的公司可免费商用,也可用于研究与非商业用途。年营收超过该规模的公司需通过官方自托管授权或 API 方式取得商用许可。

FLUX 3 Image Klein 需要什么样的显卡?

图像主干权重在 BF16 下约需 11.2GB 显存,FP8 下约 5.6GB。采用 INT8 构建时可在显存低至 8GB 的 NVIDIA GeForce RTX 显卡上原生运行。

base 版本与蒸馏版本该如何选择?

base 检查点面向微调、LoRA 训练与研究用途,官方采样步数参考为 50 步;蒸馏检查点面向低延迟的生成与编辑,官方采样步数参考为 16 步。常规出图用蒸馏版本,需要定制风格或训练自有 LoRA 时用 base 版本。

© 版权声明

相关文章