Stable Diffusion 中控制光线的三种方式

使用 Sunlight（阳光）在图像中添加阳光效果。它通常用于渲染大自然背景。

向提示中添加提示词 sunlight：

Backlight（背光）会将光源放在图片主体后面。通过添加这个提示词，你可以产生一些时尚的效果。

向提示中添加 backlight：

众所周知，Stable Diffusion 不会无人指导地生成暗图像。解决这个问题的方法有很多，包括使用模型和 LoRA。但一个更简单的方法是添加一些昏暗的光线提示词。

向提示中添加 dimly lit：

Crepuscular rays（晨光射线）用于添加光线穿过云层，产生的光线效果。它可以创造出令人惊叹的视觉效果。

该提示和纵横比通常用于生成全身图像，添加 crepuscular rays 会放大图像。我使用 crepuscular rays, face 略微放大了面部。

提示：

• 如果未看到效果，请增加提示词的权重。
• 这些光线提示词并不总是有效的。尝试一次生成几张图像进行测试。

区域光线控制

提示中的光线提示词适用于整个图像。你可以使用工具进一步调整光线效果以适应特定区域。

你需要安装 Regional Prompter 扩展。请查阅文章以了解安装说明。

在这个例子中，你将为图像的上部和下部应用不同的光线。

在 txt2img 页面上，展开 Regional Prompter 部分。

• Active: Yes
• Use common prompt: Yes
• Split mode: Vertical
• Divide Ratio: 2,3

点击 visualize and make template，确认图像被分为两个垂直区域。

输入提示：

fashion photography, a woman
BREAK
( hard light:1.2), (volumetric:1.2), well-lit
BREAK
(dimly lit:1.4)

并使用下面的负面提示：

disfigured, ugly, bad, immature, cartoon, anime, 3d, painting, b&w, nsfw

其他参数保持不变。

你将得到一些在顶部光线良好但底部较暗的图像。

现在试试交换光线分配。

fashion photography, a woman
BREAK
(dimly lit:1.4)
BREAK
( hard light:1.2), (volumetric:1.2), well-lit

光线相应地交换了。

提示：

• 如果未看到效果，请调整提示词的权重。
• 区域提示并不总是百分之百有效。生成多一些的图片，并挑选出最好的结果。

使用 ControlNet 控制光照

这种方法允许你精确控制光线。

Txt2img 设置

在 txt2img 页面上，按照通常的方式生成图像。

选择要添加光线的图像。

将其保存到本地存储（我们稍后会用到 ControlNet）。

点击 Send to img2img。

Img2img 设置

你的提示、负面提示、图像大小和种子值现在已经传输到 img2img 页面。

在 img2img 页面上，导航到 ControlNet 部分。

上传刚才保存的图像到 ControlNet Unit 0。

使用以下设置。

• Enable: Yes
• Pixel Perfect: Yes
• Allow preview: Yes
• Control Type: Depth
• Preprocessor: depth_zoe
• Model: control_xxxx_depth
• Control Weight: 0.6

滚动到 img2img canvas，删除图像。

我们将使用以下图像来控制光线。该图像指定了靠近顶部的聚光灯。

将此图像上传到 img2img canvas。

将 resize mode 设置为 Just Resize。

将 denoising strength 设置为 0.95。

按下 Generate。

你应该得到带有光源在顶部的图像。

你可以使用位于右上角的 Edit Tool（铅笔图标）来放大 img2img 画布中的某个区域。

点击铅笔图标后，拖动突出显示区域的角来调整大小。目前该工具中存在一些问题，你可能需要执行两次。

例如，下面的截图显示了将相同的图像裁剪，以便光源位于左上角。

请参考面部和帽子的左侧，比之前的图像更亮。

同样地，使用光源位于左下角，从底部左侧照亮图像。

或者使用更高对比度的对角光。

以下是一些光源图案的示例。

使用它们就可以不需要针对某个区域进行修改而实现所需的光线效果。

你可以不使用深度控制模型。而可以使用其他模型，如 canny 和 line art realistic。尝试不同的预处理器，看看哪个适合你。

如果看到不自然的颜色，请降低 Controlnet weight。调整降噪强度并观察效果。