Controlnet 的作者张吕敏前几天刚制作了flux dev nf4 v1版本,马上在今天又推出了v2版本,体积可以是原版本的一半,在其制作的WebUI Forge 工具上,只需 6GB 显存就能生成图片,生成质量比v1 更好,速度更快。ComfyUI 的作者也相应地开发了一个针对这个版本的节点,现在在 ComfyUI 上也能跑这个轻量版的 FLUX 了。
敏神也说明了一下V1和V2版本的区别:
模型位置:https://huggingface.co/lllyasviel/flux1-dev-bnb-nf4/tree/main
ComfyUI上使用需要用到 NF4 加载器插件:https://github.com/comfyanonymous/ComfyUI_bitsandbytes_NF4
由于该插件还没被管理器收入,所以我们只能手动安装该插件
我们下载插件的压缩包
然后把插件解压到我们的ComfyUI \ custom_nodes文件夹内即可
然后到 Windows_portable\python_embeded 文件夹打开 CMD 运行 python.exe -s -m pip install -U bitsandbytes
来安装 bitsandbytes。工作流中将常规的 Load Checkpoint 节点换为
CheckpointLoaderNF4 即可。然后我们还要把ComfyUI的版本更新到最新。最后我们重启我们的ComfyUI就可以了。
工作流中将常规的 Load Checkpoint 节点换为 CheckpointLoaderNF4 即可。采样器的CFG我们可以设置成:1
这里我测试出一张图是30秒,还是挺快的
出图质量对比
出图的质量还是略有下降的,不过也是可以理解,毕竟NF4把VAE,Clip都整合到一起了才12G。感兴趣的小伙伴也可以去测试一下哦
1
© CopyRight 2002-2024 ,CHINAZ.COM , Inc.All Rights Reserved.