在ComfyUI中使用Florence2制作一个打标工作流,轻量又高效

9/9/2024, 11:30:34 AM | 热度:288 | 阅读本文需 1 分钟

点赞

上篇我们教大家如何在ComfyUI中使用Florence2 反推提示词,这篇教程我们会使用Florence2 搭建一个反推工作流,非常的轻量和高效

如果还没有安装Florence2 的小伙伴可以看这篇哦:

https://aisc.chinaz.com/jiaocheng/10364.html

我们可以先预览一下完整的工作流:

image.png

工作流解析

1.加载图片

首先我们肯定是加载我们的图片文件,这个节点在Inspire Pack节点包中有,大家可以去安装一下。

2.缩放或者裁切图片

加载后的图片,如果你已经裁切好就不用缩放或者裁切了,如果你没有裁切过,就可以通过图像缩放节点或者裁切图片的节点把图片处理成适合Lora训练的尺寸

一般sd15 训练的尺寸是:512*512

sdxl和flux:768*768

当然不一定要正方形,你选择768* 512 或者512* 768 都是可以的,看你训练素材的长宽比设置

3.添加触发词

在comfyui中打标我们可以直接添加触发词非常的方便

image.png

4.使用Florence2 反推

可能有小伙伴问为什么用Florence反推不用jaycaption呢,因为joy反推的比较慢而且占用较多的显存。而且joy反推的非常细节,经常是大篇幅的小作文,如果你训练的是Flux模型我们一般不需要太精确的标签。

其中的task参数我们选择detail模式就可以,这样生成的提示词长度刚好

5.提示词合并

这一步合并的是我们的触发词和反推的提示词

image.png

6.保存图片和标签

这个节点可以帮我们导出新的标签和图像还可以选择导出的图片质量

image.png

最后导出的效果:

image.png

image.png

以上就是在comfyui中使用Florence2 实现打标啦,而且有了这个工作流我们可以非常轻松的替换不同的模型打标,非常的方便。想训练Lora的小伙伴也感觉去试试吧!

2

继续阅读本文相关话题

本文收录于专题

ComfyUI教程

共收录篇

查看本专题

文章目录

工作流解析

AI教程交流群

扫描二维码加入群聊

与同行学习交流&资源共通