AI绘画Stable Diffusion上手
type
Post
status
Published
summary
截止到目前，AI绘画领域比较主流的还是Midjourney和Stable Diffusion，但目前Midjourney已经没有免费的使用额度，而Stable Diffusion则是完全免费开源，并且其可扩展性很强；除了可以部署在各种平台上还能，还能更换模型创作不同风格的化作。
slug
stable-diffusion
date
Jun 20, 2023
tags
AI绘画
SD
stable-diffusion-weiui
Stable Diffusion
category
大语言模型
password
icon
URL
Property
Feb 28, 2024 01:06 PM
一、概述
截止到目前，AI绘画领域比较主流的还是Midjourney和Stable Diffusion，但目前Midjourney已经没有免费的使用额度，而Stable Diffusion则是完全免费开源，并且其可扩展性很强；除了可以部署在各种平台上还能，还能更换模型创作不同风格的化作。
附上stable-diffusion项目地址：
stable-diffusion
CompVis • Updated Mar 26, 2024
在stable-diffusion的基础上，有大佬开发出了stable-diffusion-weiui：
stable-diffusion-webui
AUTOMATIC1111 • Updated Mar 26, 2024
这是一个利用 gradio 模块搭建出交互程序，是一个基于stable-diffusion的基础应用，它可以在低代码 GUI 中立即访问 Stable Diffusion；stable-diffusion-weiui提供了多种功能，如 txt2img、img2img、inpaint 等，还包含了许多模型融合改进、图片质量修复等附加升级
本篇文章主要记录我在不同平台上部署和使用stable-diffusion-weiui的过程。
二、搭建部署
2.1、Google Colab
对于Mac用户来说，用显卡加速AI绘画是不可能了，所以只能在线白嫖一下Google Colab(如果不知道可以自行探索)。
部署到Google Colab主要是参照这个项目stable-diffusion-weiui-colab的指导
stable-diffusion-webui-colab
camenduru • Updated Mar 26, 2024
但实际只需要运行下面这三个文件就可以完成部署和启动
实在不懂，可以看这篇教程：无显卡也能AI作画 | Colab + Stable Diffusion WebUI - 掘金
一些用Google Colab部署之后画的图
不过遗憾的是，由于Google Colab有资源使用限制，我在第一天部署好之后疯狂画图，最终导致有限的资源被我挥霍一空，最近几天应该都不能愉快的造二次元小姐姐了🤧
2.2、Kaggle
Kaggle的优势在于免费资源比Google Colab多，每周有30小时的使用时长，对于需求不大的小伙伴来说，完全够用了。但是两种方法都需要科学上网，对于不能科学上网的童鞋，只能使用阿里云和其他的部署方式了
教程参考：
- AI 绘画基于 Kaggle 10 分钟搭建 Stable Diffusion（保姆级教程）——无法更换模型，只作参考，不推荐使用
2.3、阿里云
阿里云对新手提供7天的免费试用，试用期结束后就需要开始氪金了。
教程参考：
2.4、Mac OS
……
2.5、Windows
……
三、绘图技巧
3.1、建筑效果图绘制
3.1.1、建筑风格模型下载：
3.1.2、建筑风格提示词：
示例：
- architecture exterior design,Sleek, futuristic office building with a dramatic, angular design,a shimmering metallic exterior, bright shades,set against a backdrop of a bustling, city skyline,hyperrealistic, 4K, masterpiece, highest quality
拆解：
- 建筑类型：futuristic office building with a dramatic; modern concert hall
- 设计风格：angular design; twisted, helix-like shape
- 建筑材质：a shimmering metallic exterior; soft concrete exterior; light construction materials
- 环境背景：set against a backdrop of a bustling city skyline; towering mountains, sunset sky; desert, morning, religious; under the ocean
- 色彩色调：bright shades
- 情感色彩：Sleek
参考：
注意：画幅也会影响绘画结果，可适当调整
3.1.3、建筑效果图
3.2、写实人像绘制
3.2.1、写实人像提示词：
- portrait：肖像；portrait of
- 眼睛：detailed face and eyes:1.3; perfect eyes:1.1; contacts, iris (眼角虹膜)
- 头发：shampoo, conditioner（洗发水护发素？？？）洗发水和护发素广告中都会展现完美的女性，因而AI也可以识别这些词
- 衣服：think dresses/tights/shirts/socks；连衣裙/紧身衣/衬衫/长袜
- 反光：
- 皮肤：skin blemish、freckles、beauty marks（皮肤斑点、雀斑、美人痣）
- 负面词：（DIRT、BLOOD、PAINT）泥土、血液、油漆
- 年龄：用WOMAN代替女孩，用MAN代替男孩；添加25 岁、 100 岁、性别、性格等有助于AI理解年龄的词以获得更好的效果
- 氛围：将glow、bloom、haze、soft置于提示中有助于生成朦胧和梦幻般的图片。有时使用simple代替intericate有助于生成更清晰、更好的图片，特别是对于机器人和卡通或一些更简单的风格人像。
- 比例：虽然默认的512×512绘制人像不会出问题，但通常我们都希望绘制竖版人像也能表现良好，这就要控制长宽比，如果采用512×704、512×768，可以添加full body，以获得完美的半身人像，避免出现上下双头。
3.2.2、负面提示语：
painting, drawing, ((((visible hand)))), ((((ugly)))), (((duplicate))), ((morbid)), ((mutilated)), [out of frame], extra fingers, mutated hands, ((poorly drawn hands)), ((poorly drawn face)), (((mutation))), (((deformed))), ((ugly)), blurry, ((bad anatomy)), (((bad proportions))), ((extra limbs)), cloned face, (((disfigured))), out of frame, ugly, extra limbs, (bad anatomy), gross proportions, (malformed limbs), ((missing arms)), ((missing legs)), (((extra arms))), (((extra legs))), mutated hands, (fused fingers), (too many fingers), (((long neck)))
示例：
portrait of a female, natural light, cinematic light, 4k, Photo realistic, volumetric lighting, global dynamic lighting, artgerm, High Detail, bokeh(detailed face and eyes:1.3),(perfect eyes:1.1),contacts, iris,full body,think dresses,skindentation,shampoo, conditioner,short skirts,trending on artstation.
参考：
四、推荐阅读
- SD官方在线版：Stable Diffusion Online
- SD风格模型下载：
- AI绘图提示词网站：点我点我
- AI绘画领域盘点：点我点我