Stable Diffusion 主流模型推荐与分类解析
Stable Diffusion(稳定扩散)(简称 SD) 正在席卷世界,让任何人都可以使用各种风格的人工智能技术生成图像。只需点击几个按钮,您就可以生成一个人的照片级真实感图像,或一幅高精度的风景数字插图。通过使用精心制作的提示和特定的训练模型,您可以创建可用于各种项目的高质量图像。
一:什么是 SD 模型?
简单地说,稳定扩散模型允许您控制图像生成的风格。使用专门针对真实图像训练的模型将产生逼真的结果,例如照片真实感的肖像。另一方面,使用经过水彩插图训练的模型会给你一个看起来像是用同一风格画的图像。
二:SD 模型分类
【1】大模型/底模型 - 属于基础模型也叫预调模型
首先介绍的是大模型,是 SD 能够绘图的基础模型。安装完 SD 软件后,必须搭配基础模型才能使用。不同的基础模型,其画风和擅长的领域会有侧重。

【2】LoRA 模型 - 属于微调模型
介绍:
在大模型的基础上用于满足一种特定的风格,或指定的人物特征属性。在数据相似度非常高的情形下,使用微调模型,可以节省大量的训练时间和训练资源,就可以产出我们需要的结果。

【3】VAE 美化模型
VAE,全名 Variational Autoencoder,中文叫变分自编码器。作用是:滤镜 + 微调。
三:大模型文件格式推荐——CKPT 和 SafeTensor 之间有什么区别?
模型数据文件用于保存机器学习模型学习到的信息。有两种类型的模型数据文件:.ckpt 和.safetensors。这些文件包含相同的信息,但.safetensors 文件被认为更安全,因为它们不使用 pickle 模块。
四:最基础的大模型推荐
【1】写实大模型 Realistic Vision V2.0
当涉及到人工智能图像生成时,现实主义是最难的主题之一。因为我们的眼睛被训练来识别最小的细节和缺陷,所以机器很难生成逼真的照片。然而,真实视觉已经能够通过其训练的模型产生惊人的结果。
该模型能够制作出一幅逼真的肖像,几乎完全符合我们的提示。另一方面,这幅插图展示了真实视觉捕捉数字艺术细节和细微差别的能力。
我们向任何希望使用人工智能生成照片级真实感图像的人推荐该模型。请记住,通过使用即时工程、更高的步数和其他技术,您可以获得更好的结果。

【2】DreamShaper
DreamShaper 凭借其美丽的数字艺术感,进一步融入插画风格。这个模型在肖像提示上表现得特别好,创造了一件令人惊叹的艺术品,捕捉到了主题的感觉和风格元素。
在风景方面,DreamShaper 能够创造出一个有趣而复杂的图像,具有鲜艳的色彩和迷人的细节。插图展示了充满活力的色彩和各种形状,使图像栩栩如生。
这个模型推荐给任何想用自己的人工智能模型创作插图的人。此外,您可以使用各种设置来确保结果看起来更像数字艺术作品。我们建议尝试不同的步数,并使用此模型提示工程技术以获得最佳结果。



