使用JoyTag进行单词打标,彻底告别WD1.4反推模型

9/9/2024, 3:43:52 PM | 热度:124 | 阅读本文需 2 分钟

点赞

JoyTag 是一种比较先进的 AI 视觉模型,用于标记图像,专注于性积极性和包容性。它使用 Danbooru 标记架构,但适用于从手绘到摄影的各种图像。

报脸网试用地址:Joytag - a Hugging Face Space by fancyfeast

在comfyui中使用我们可以ComfyUI_NYJY节点

这个节点支持文本翻译,JoyTag和JoyCaption等功能

节点安装

1. 通过ComfyUI Manager安装。

打开ComfyUI Manager,点击“Install via Git URL”按钮

在弹出的对话框中填入:https://github.com/aidenli/ComfyUI_NYJY

image.png

2. 手动拷贝

访问项目地址:https://github.com/aidenli/ComfyUI_NYJY 点击Code按钮,在弹出的浮层中点击“Download ZIP”。下载后解压到 [你的ConmfyUI目录]/custom_nodes/

image.png

使用说明

1 JoyTag基本信息

原项目github地址:https://github.com/fpgaminer/joytag

该插件运行时会自动下载所需的模型,下载模型的所有相关文件将存放到:

[comfyui根目录]/costom_nodes/ComfyUI_NYJY/models/joytag中

如果使用手动下载,需要自己创建目录。

模型下载地址:https://huggingface.co/fancyfeast/joytag/tree/main 

(model.onnx文件可以不用下载)

2 节点参数说明

THRESHOLD:浮点类型,范围 0.1 - 1,值越小,产生的tag数量越多。

正面提示词:在完成分析图片之后,额外自定义添加到tag列表的词或句子

负面提示词:在完成缝隙图片之后,需要过滤掉的tag

safe_mode:安全模式,自动过滤tag中血腥、色情等提示词(词库逐步完善中)

3 工作流示例(和WD14 对比)

测试一:

image.png

测试二:

image.png

同一张图片joytag明显反推出的元素更多,所以以后小伙伴们用sd15 的模型基本就可以告别wd1. 4 啦,想要训练sd15 模型的Lora使用JoyTag就可以啦。

0

继续阅读本文相关话题

本文收录于专题

ComfyUI教程

共收录篇

查看本专题

文章目录

节点安装

使用说明

AI教程交流群

扫描二维码加入群聊

与同行学习交流&资源共通