SD免费开源的打光神器IC-Light!

5/31/2024, 3:21:50 PM | 热度:12 | 阅读本文需 3 分钟

点赞

一、IC-Light 简介

本文介绍了Stable Diffusion(SD)中一款免费开源的打光工具IC-Light,专为AIGC社区设计。文章详细阐述了IC-Light的功能特点、安装方法以及在AI绘图中的应用实例,展示了如何利用IC-Light为作品增添逼真的光影效果。

IC-Light 项目主页: https://github.com/lllyasviel/IC-Light

IC-Light,全称为“Imposing Consistent Light”,是由ControlNet的作者张吕敏开发的一款AI图像打光工具。该工具利用先进的机器学习技术,能够根据简单的文本提示或背景图像,调整照片中的光照效果,从而实现一致的光源效果。

IC-Light提供两类模型:文本条件重照明模型和背景条件模型。这两种模型都需要以前景图像作为输入。用户可以通过输入文本提示词(如“左侧光线”、“日光”)来控制光源方向和强度,或者使用背景图像来引导光照效果。

image.png

文本条件模型

(请注意,“照明偏好”只是初始潜在 - 例如,如果照明首选项为“左”,则初始潜在为左白右黑。

image.png

从官方放出的截图中可以看出,IC-Light 可以对色调氛围和光照方向进行控制。如提示词写了 “窗外的阳光”,那么处理后的图像中人物身上就会有明显的光影,整体色调也会变成温暖的橘色;如果提示词写的霓虹灯光,则画面会变成暗调的红蓝光。光照方向则可以通过 Lighting Preference 选项来控制,支持左侧光、右侧光、底部光和顶部光。即使原图中的光影非常复杂,IC-Light 也可以重新进行打光。

image.png

背景条件模型

后台条件模型不需要仔细提示。人们可以使用简单的提示,例如“帅哥,电影照明”。

image.png

二、使用方法

1. 在线体验

网址直达:https://huggingface.co/spaces/lllyasviel/IC-Light

Huggingface 已经有了 IC-Light 的在线使用 Demo,可以直接体验其光照控制功能。使用方式也非常简单,上传一张人物图像,用文本描述新的背景内容和色调氛围,然后在 Lighting Preference 中设置光照的方向,最后点击 Relight 生成就可以了。

image.png

image.png

SD WebUI Forge

插件链接:https://github.com/huchenlei/sd-forge-ic-light

模型下载:https://huggingface.co/huchenlei/IC-Light-ldm/tree/main

除SD WebUI Forge 也已经支持 IC-Light 的插件,可以在 「extension」中通过网址安装。然后下载 clight_sd15_fc_unet_ldm(用于前景)和 iclight_sd15_fbc_unet_ldm(用于背景)两个模型,安装到根目录的 stable-diffusion-webui-forge/models/unet(没有 unet 文件夹手动创建一个)。

image.png

SD WebUI Forge 中也支持从文本生成背景、控制照明方向和上传背景图对给定前景造成影响。需要注意的是:

  1. 如果是自己上传背景图,需要将照明模型又 FC 转为 FBC;
  2. CFG 数值要调低,一般为2;
  3. 控制光照方向时,插件为自动在图生图版块生成灰度图,此处的 CFG 同样要调整为2,重绘幅度要调高为1。

image.png

0

继续阅读本文相关话题

本文收录于专题

SD教程

共收录篇

查看本专题

文章目录

一、IC-Light 简介

二、使用方法

AI教程交流群

扫描二维码加入群聊

与同行学习交流&资源共通