Black Forest Labs是专注于视觉生成式AI模型研发的前沿实验室,该实验室已于11月25日推出FLUX.2先进图像生成模型系列。
FLUX.2 具有大量全新的工具和功能,包括多参考图像生成功能,能够在保持照片级真实细节和更清晰字体的同时,批量生成数十张相似图像。
NVIDIA联合Black Forest Labs和ComfyUI开展合作,在FLUX.2模型发布之际就完成了FP8量化支持的部署以及针对RTX GPU的性能优化工作,这一举措让模型的显存占用减少了40%,同时性能也得到了40%的提升。
无需安装其他软件,新模型可直接在 ComfyUI 中使用。
先进的视觉智能
FLUX.2生成的图像逼真度极高,即便在大尺寸输出时依然能维持出色的画质。其具备高达400万像素的分辨率,同时融合了真实世界的光照原理与物理特性,有效去除了那些会削弱图像真实感的“AI生成痕迹”。
这些模型新添了直接姿态控制的功能,能让用户精准设定图像里人物或主体的姿势,并且可以在信息图、界面屏幕乃至多语言内容里展示出干净、清晰且易于阅读的文字。全新的多图参考功能则让艺术家能够挑选最多六张风格或主体保持统一的参考图,从而省去了复杂的模型微调步骤。
惊艳的写实细节。图片由 Black Forest Labs 提供
了解 FLUX.2 的全部功能,请查看 Black Forest Labs 的博客
为 RTX 优化
全新的FLUX.2模型性能强劲,不过对硬件配置的要求颇为苛刻。该模型配备32B参数,完整加载的情况下需要占用90GB显存。即便采用当下流行的lowVRAM模式(此模式支持创作者每次仅加载当前正在使用的模型部分),显存需求仍达64GB,这使得消费级显卡几乎无法对该模型进行高效运行。
为了让更多用户用上FLUX.2,NVIDIA和Black Forest Labs携手对该模型开展FP8量化工作,在画质相近的情况下,把显存需求减少了40%。
FLUX.2 来了
为了使模型能够在 GeForce RTX GPU 上运行,NVIDIA 携手 ComfyUI 这一备受欢迎的视觉生成式 AI 模型 PC 应用程序,开展集成优化工作,对该应用的内存卸载功能(weight streaming)进行了升级。
功能升级后,用户可将模型的一部分转移至系统内存,从而扩展 GPU 的可用显存。尽管系统内存速度比 GPU 显存更慢,导致一定性能损失。
与此同时,NVIDIA 也在不断与 ComfyUI 展开合作,针对 NVIDIA 及 GeForce RTX GPU 进行模型性能优化,其中涵盖了对 FP8 模型版本的支持与优化工作。
现在就可以开始使用FLUX.2了。请更新ComfyUI,查看FLUX.2模板,或者访问Black Forest Labs的Hugging Face页面下载模型权重。
NVIDIA RTX AI PC的相关信息请关注微博、抖音及哔哩哔哩官方账号。
软件产品信息请查看声明。
关于NVIDIA
NVIDIA (NASDAQ: NVDA) 是加速计算领域的全球领导者。