如何在ComfyUI中使用大语言模型

7/18/2024, 10:08:49 AM | 热度:245 | 阅读本文需 1 分钟

点赞

引言

在现代用户界面设计中,用户体验的优化是一个不断追求的目标。ComyUI作为一个先进的用户界面,通过集成大型语言模型,可以帮助用户更高效地完成任务。本文将详细介绍如何在ComyUI上利用大语言模型来反推提示词,从而提升用户交互的流畅性和效率。

第一步:下载安装ollama

Ollama 是一个开源的大型语言模型服务工具,旨在让用户能够在本地设备上运行大型语言模型(LLMs)。

我们在ollama官网下载ollama:https://ollama.com/

选择你对应的系统下载安装即可

image.png

下载Ollama模型,你点击官网右上角的models可以看到很多模型,我这里以llava-phi3 模型为例,教大家如何安装模型。llava-phi3 是一款视觉模型,可以识别我们的图片生成提示词,非常好用。

image.png

我们在llava-phi3 的主页复制ollama run llava-phi3:latest这段指令

image.png

确保你的ollama已经安装并运行。

image.png

然后我们打开CMD命令行窗口,把刚刚复制的指令黏贴,ollama就会自动帮我们下载模型并调用

image.png

你可以发消息进行对话就代表安装成功

image.png

第二步:下载ComfyUI ollama插件

我们在管理器中搜索ollama安装

也可以通用Git URL安装:https://github.com/stavsap/comfyui-ollama

image.png

第三步:在comfyui中使用Ollama

安装成功后我们就可以使用ollama Vision节点为来根据我们提供的图片生成提示词

image.png

示例:如果你用的是SD3 或者Kolors语义理解很强的模型,这款插件就非常好用。如果是SD1. 5 或者SDXL用WD1. 4 标签反推提示词就可以了

image.png

结语

通过以上步骤,你可以有效地在ComyUI上利用大语言模型来反推提示词,提升用户体验。

2

继续阅读本文相关话题

本文收录于专题

ComfyUI教程

共收录篇

查看本专题

文章目录

引言

第一步:下载安装ollama

第二步:下载ComfyUI ollama插件

第三步:在comfyui中使用Ollama

结语

AI教程交流群

扫描二维码加入群聊

与同行学习交流&资源共通