stable diffusion入门

一.简介

1.1 什么是stable diffusion
Stable Diffusion译为稳定扩散,是一个开源的图像生成AI系统,由Anthropic公司开发,我们可以通过文字描述生成图片,让AI根据我们的想象画出一幅图来,也可以通过图像生成图片,将现实世界中的照片经过AI处理变成二次元画风

其原理是增加噪声,去除噪声的过程,如下图所示(截图来自B站,Nenly同学)
在这里插入图片描述
1.2 组成部分

  • 模型: 通过大量素材训练得到的模型,模型决定出图风格,如果训练的是二次元素材,就出二次元风格的,写实风就出写实风格
    模型下载网站:
    奇维泰
    抱脸
    Art
  • 提示词: 由英文单词组成,半角逗号隔开,分为正向提示词和反向提示词,正向输入想生成图片的一些特征,即图片中想要呈现的东西,反向提示词就是告诉AI,图片中不想要出现的东西
  • 迭代步数: 默认20,也就是AI处理图片的次数,值越高图片质量越精细,速度越慢
  • 采样方法: 是一种用于模拟随机过程的方法,它可以模拟具有长尾分布的随机变量。该方法的主要思想是将随机变量分解为稳定分布和正态分布的组合,然后使用随机数生成器来模拟这些分布。
    …

二.如何使用

2.1 在线AI生成网站

  1. https://www.liblib.ai 国内的生成网站,无需梯子,每天免费生成100次
  2. https://dreamstudio.ai 需要梯子,积分制,首次赠送100,生图1次消耗3~4积分
  3. https://lexica.art 需要梯子,只支持模型Lexica Aperture v2,生图质量极高
  4. https://playgroundai.com 需要梯子,可免费生图1000次,支持SD1.5，SD2.1,自有模型Playground AI

2.2 本地安装
对硬件要求比较高,必须是独立显卡,显存6G以上,显卡越好,生成速度越快,质量越好
优势:

  • 无限制安装各种插件,例如换脸插件roop,人脸修复ADetailer,ControlNet等插件
  • 没有使用次数限制
    安装教程

stable diffusion主界面(秋叶整合版):
在这里插入图片描述

二.文生图

提示词基本格式:

  • 人物及主体特征: 1girl(1男孩),1boy(1女孩)…
  • 场景特征: outdoor(室外),indoor(室内)…
  • 环境光照: day(白天),night(夜晚)…
  • 画幅视角: close-up(特写),full body(全身)…

示例一:

正向提示词:
identification photo,1 girl,long hair,bangs,looking at viewer,(blue suit,blue tie,Far Mountain background:1.3),happy,smile,highres,outdoors,naughty_face,
反向提示词:
EasyNegative,badhandv4,ng_deepnegative_v1_75t,(worst quality:2), (low quality:2), (normal quality:2), lowres, ((monochrome)), ((grayscale)), bad anatomy,DeepNegative, skin spots, acnes, skin blemishes,(fat:1.2),facing away, looking away,tilted head, lowres,bad anatomy,bad hands, missing fingers,extra digit, fewer digits,bad feet,poorly drawn hands,poorly drawn face,mutation,deformed,extra fingers,extra limbs,extra arms,extra legs,malformed limbs,fused fingers,too many fingers,long neck,cross-eyed,mutated hands,polar lowres,bad body,bad proportions,gross proportions,missing arms,missing legs,extra digit, extra arms, extra leg, extra
迭代步数: 30
采样方法: DPM++ 3M SDE Karras
模型 : majicmixRealistic_v7(麦橘写实风)
效果:
在这里插入图片描述

在这里插入图片描述

三.图生图
提示词和文生图基本一致,可根据上传的图片描写特征,可选择重绘幅度,默认0.75,一般设置为0.5可达到非常相似的效果
简单用法: 选择一张自拍照,选择二次元模型,实现三次元到二次元的转化,也可上传一张二次元照片,转化为写实风格
示例1:
模型:
majicmixRealistic_v7.safetensors: 麦橘写实
正向提示词:
1girl,long hair,gold hair,bangs,traditional_clothes,sky,head_pteris,highres,realistic,cyan clothing,gloom,High neck tight fitting clothes,as if deep in thought,
反向提示词:
nsfw,(worst quality, low quality:1.4),(realistic, lip, nose, tooth, rouge, lipstick, eyeshadow:1),(dusty sunbeams:1),(abs, muscular, rib:1),(depth of field, bokeh, blurry:1.4),(motion lines, motion blur:1.4),(greyscale, monochrome:1),text,title,logo,signature,
迭代步数:
30
重绘幅度: 0.5
效果:
在这里插入图片描述