stable diffusion 极简入门 核心 概念介绍 使用

news/2024/7/10 21:52:10 标签: stable diffusion, 人工智能, AIGC, ai绘画

一、怎么写提示词(prompt)

1.1 结构

一般分三部分,按从前到后的顺序:画面质量or风格、画面主体内容、其他细节/背景。

  1. 画面质量:如,masterpiece,best quality,highly detailed
  2. 画面主体内容:如,a girl, red hair, blue eyes, beauty face
  3. 细节/背景:如,Wearing a princess hat, in street, night, wind

1.2 prompt 权重

1.2.1 prompt 的位置越靠前,其所占的权重就越大。

1.2.2 手动指定权重 写法 (blue eyes:1.2)

这里的 “1.2” 就是权重,默认权重为1,建议范围 0.7-1.5

二、图片的大小(w/h>700 & w/h<500)

由于目前多数模型是在 512*512 图片集中训练出来的。

所以建议:宽和高中有一维大于 700,另一维小于500

图片过大时,处理过程可能会不受控地插入拼接的元素,或是出现重复的多元素。
图片过小时,由于画布太小,没有空间让AI画出更多细节,生成效果会比较粗糙。

如果想生成全景图片时,可以将图片设置大一些。同时,将提示词写得更精细、丰富一些。

三、采样迭代步数 Sampling Steps(推荐 20~30)

迭代步数越大,生图速度越慢。

如果正在测试新的模型或Prompts效果,推荐使用10~15 steps,可以快速获得结果,方便进行调整。
当找到合适的模型和prompts时,可以将steps增加到 20~30 以丰富画面细节。

超过30以后,增益较小,生图时间变长,得不偿失。

四、提示词引导系数 CFG scale

数越大,你输入的prompt对图片生成影响越大,控制越强,发散低,容易出现过拟合。
数越小,你输入的prompt对图片生成影响越大,控制度低,发散高,AI发挥性高。

人物 提示词,7-15
建筑等大场景,3-7

五、随机种子 Seed

默认 -1,表示由AI 随机生成,每个生成都不一样。
每次生成的图像,会关联一个种子。

如果生了一张比较好的图片,想在此基础上进行微调,可以将随机种子填成上次生成物用的种子。
再调整其他参数,尝试不同效果。

六、模型类别介绍

checkpoint:大型 SD model
LoRA:LoRA模型是小型的 SD model,它对 checkpoint 模型进行微小的更改。通常比 checkpoint 模型 小10到100倍。占用磁盘空间更小,对于模型收藏者更友好。建议权重为 0.7~1

VAE:简单理解是 对 checkpoint 微调,加滤镜,不会对输出结果有大影响,一般自动就好。

embedding:是一个小组件,它打包特征描述,不用每次输入很多prompt
相比于LoRA,embedding 的大小只有几十 KB,非常小。还原度比 lora 差一些,但在存储和使用上更加方便。


http://www.niftyadmin.cn/n/5283206.html

相关文章

基于YOLOv8深度学习的200种鸟类智能检测与识别系统【python源码+Pyqt5界面+数据集+训练代码】目标检测、深度学习实战

《博主简介》 小伙伴们好&#xff0c;我是阿旭。专注于人工智能、AIGC、python、计算机视觉相关分享研究。 ✌更多学习资源&#xff0c;可关注公-仲-hao:【阿旭算法与机器学习】&#xff0c;共同学习交流~ &#x1f44d;感谢小伙伴们点赞、关注&#xff01; 《------往期经典推…

ChatGPT 4 实战案例,Excel2021多条件查找

在Excel的使用过程中,查找操作是经常需要完成。例如下列实际需求: 多条件的查找应用,如果不知道用什么公式来完成,可以借助于ChatGPT4来帮忙实现。 Prompt::有一个Excel表格A6至A16为班级,B6至B16为姓名,D6至D16为考核得分,请根据A3单元格的班级和B3单元格的姓名来查找…

采用SpringBoot框架+原生HTML、JS前后端分离模式开发和部署的电子病历编辑器源码(电子病历评级4级)

概述&#xff1a; 电子病历是指医务人员在医疗活动过程中,使用医疗机构信息系统生成的文字、符号、图表、图形、数据、影像等数字化信息,并能实现存储、管理、传输和重现的医疗记录,是病历的一种记录形式。 医院通过电子病历以电子化方式记录患者就诊的信息&#xff0c;包括&…

wpf-MVVM绑定时可能出现的内存泄漏问题

文章速览 引言错误示范示例1示例2 坚持记录实属不易&#xff0c;希望友善多金的码友能够随手点一个赞。 共同创建氛围更加良好的开发者社区&#xff01; 谢谢~ 引言 正确结构&#xff1a; Model <——> ViewModel <——> View 但很多时候&#xff0c;很容易出现…

Go 泛型发展史与基本介绍

Go 泛型发展史与基本介绍 Go 1.18版本增加了对泛型的支持&#xff0c;泛型也是自 Go 语言开源以来所做的最大改变。 文章目录 Go 泛型发展史与基本介绍一、为什么要加入泛型&#xff1f;二、什么是泛型三、泛型的来源四、为什么需要泛型五、Go 泛型设计的简史六、泛型语法6.1 …

Java之LinkedList核心源码解读

LinkedList核心源码解读 LinkedList 是一个基于双向链表实现的集合类&#xff0c;经常被拿来和 ArrayList 做比较 LinkedList 插入和删除元素的时间复杂度&#xff1f; 头部插入/删除&#xff1a;只需要修改头结点的指针即可完成插入/删除操作&#xff0c;因此时间复杂度为 O…

ZooKeeper 使用介绍和原理详解

目录 1. 介绍 重要性 应用场景 2. ZooKeeper 架构 服务角色 数据模型 工作原理 3. 安装和配置 下载 ZooKeeper 安装和配置 启动 ZooKeeper 验证和管理 停止和关闭 4. ZooKeeper 数据模型 数据结构和层次命名空间&#xff1a; 节点类型和 Watcher 机制&#xff…

nodejs+vue+ElementUi摄影作品图片分享工作室管理系统

第1周 2.21&#xff5e;2.27 查阅资料&#xff0c;学习vscode开发平台和vue框架技术 第2周 2.28&#xff5e;3.6 对软件功能需求进行分析, 软件功能模块划分及软件界面设计 第3周 3.7&#xff5e;3.13 撰写并提交毕业设计开题报告、英文资料翻译 第4周 3.14&#xff5…