stable diffusion实践操作-hypernetworks

news/2024/7/10 21:49:26 标签: stable diffusion

系列文章目录

本文专门开一节写hypernetworks的内容,在看之前,可以同步关注:
stable diffusion实践操作


提示:写完文章后,目录可以自动生成,如何生成可参考右边的帮助文档

文章目录

  • 系列文章目录
  • 前言
  • 一、hypernetworks是什么?
    • 1 能做什么?
    • 2 原理
    • 3 与其它区别
  • 二、如何使用
    • 1 下载与存放
    • 2 如何使用
    • 3 注意事项
  • 三、收集到的模型
    • 1.1 Multi-waifu-mix
  • 总结


前言

`本章注意要介绍Hypernetwork,也叫做超网络,下面是一个原理概述。


一、hypernetworks是什么?

1 能做什么?

中文名字叫超网络,功能和embedding,lora类似,都是对生成的图片进行针对性的调整,小白可以理解为低配版本的lora。

因为hypernetworks主要用来训练画风,训练难度较大,很有可能被后出现的lora所替代,不过人家既然能坚持到现在,说明也有它的两把刷子。我觉得它最重要,也最好的功能就是对画面风格的转换。
下面这个就是把漫画风格转换为像素风格。

除了画风,它其实也可以训练人物和物品,比如电影角色,但是大家为什么用的少呢,它做到了神似,但是想要高精度还原的话,还是要借助于lora.

2 原理

SD的原理可以这样理解,我们发送一段文本到SD中,然后输出一张符合预期的图片。
embedding就作用于编码器中,影响最后的输出。

在整个运算当中,所有的计算都是在diffusion模型中进行,这个diffusion就是一种神经网络模型。
超网络如下图,通过控制神经网络的权重,最后来完成某种风格的图片输出。

3 与其它区别

总结如下

二、如何使用

1 下载与存放

下载后存放地址:sd-webui-aki-v4.2\models\hypernetworks

2 如何使用

和lora比较类似,hypernet:名称:权重,提示词

<hypernet:Multi-waifu-mix_v1.0:1>,alice zuberg

具体细节可以看下图

3 注意事项

因为超网络会影响模型权重,所以如果想要用好超网络,需要遵从以下几点要求:



三、收集到的模型


下载链接:
国内的是:https://www.liblibai.com
国外的是:https://civitai.com
下载后存放地址:sd-webui-aki-v4.2\models\hypernetworks

序号名称说明
1Multi-waifu-mix漫画女孩
2$1
导3$1

1.1 Multi-waifu-mix

下载链接:https://www.liblibai.com/modelinfo/20ad3e989d47d74745ccf14bcc73c411
基础模型:SD1.5(AWPainting_v1.2_liblib_sd15.safetensors)
触发词语:根据角色不同来确定
正面提示词:

fantasy,landscape,best quality,highly detailed,
<hypernet:Multi-waifu-mix_v1.0:1>,1girl,esdeath \(genshin impact\),

反面提示词:

lowres,bad anatomy,bad hands,text,error,missing fingers,
extra digit,fewer digits,cropped,worst quality,
low quality,normal quality,jpeg artifacts,signature,
watermark,username,blurry,artist name,

该模型包含了很多角色,可以根据需要进行挑选:

V1.0 model containing 75 characters:
aisaka taiga
alice zuberg
altina orion
angela balzac
angelina kudou shields
aqua (konosuba)
ayanami (azur lane)
black heart
darkness (konosuba)
echidna (re:zero)
elaina (majo no tabitabi)
emilia (re:zero)
eris greyrat
eula (genshin impact)
fujibayashi kyou
furuhashi fumino
gokou ruri
gotou hitori
hiiragi shinoa
himeragi yukina
hiroi kikuri
holo
...
图1 vladilena millize
图2 alice zuberg

总结

以上就是今天要讲的内容。


http://www.niftyadmin.cn/n/4995303.html

相关文章

又一关键系统上线,理想车云和自动驾驶系统登陆OceanBase

8 月 1 日&#xff0c;理想汽车公布 7 月交付数据&#xff0c;理想汽车 2023 年 7 月共交付新车 34,134 辆&#xff0c;同比增长 227.5%&#xff0c;并已连续两个月交付量突破三万。至此&#xff0c;理想汽车 2023 年累计交付量已经达到 173,251 辆&#xff0c;远超 2022 年全年…

目标检测YOLO实战应用案例100讲-基于RFID与目标检测的种鹅个体产蛋信息监测系统研究(续)

目录 3.4.3 结果分析 基于ROI的目标计数与产蛋信息获取 4.1 引言 4.2 ROI区域划定

【Python基础教程】快速找到多个字典中的公共键(key)的方法

前言 嗨喽~大家好呀&#xff0c;这里是魔王呐 ❤ ~! python更多源码/资料/解答/教程等 点击此处跳转文末名片免费获取 方法一&#xff1a;for in循环 from random import randint, samplea1 {k: randint(1, 4) for k in abcdefg} a2 {k: randint(1, 4) for k in abc123456…

华为数通方向HCIP-DataCom H12-821题库(单选题:221-240)

第201题 BGP 协议用​​ beer default-route-advertise​​ 命令来给邻居发布缺省路由,那么以下关于本地 BGP 路由表变化的描述,正确的是哪一项? A、在本地 BGP 路由表中生成一条活跃的缺省路由并下发给路由表 B、在本地 BGP 路由表中生成一条不活跃的缺省路由,但不下发给…

ASP.NET Core 8 的 Web App

Web App Web App 与 Web API 的不同之处在于包含 UI 部分&#xff0c;所谓的 UI 就是 HTML 页面。 Web App 支持几种渲染HTML 的方式&#xff1a; 服务端渲染客户端渲染混合渲染 服务端渲染 服务端渲染UI是在浏览器请求的时候&#xff0c;服务端生成 HTML&#xff0c;然后返…

找redis大key工具rdb_bigkeys

github官网 https://github.com/weiyanwei412/rdb_bigkeys 在centos下安装go [roothadoop102 rdb_bigkeys-master]# wget https://dl.google.com/go/go1.13.5.linux-amd64.tar.gz [roothadoop102 rdb_bigkeys-master]# tar -zxf go1.13.5.linux-amd64.tar.gz -C /usr/local将g…

通过linux定时任务删除es日志索引

能过linux定时任务删除es日志索引 项目用上了elk&#xff0c;产生的日志索引要定时&#xff0c;其一个方法&#xff0c;通过linux定时任务&#xff0c;调用es接口删除索引。 #!/bin/bash #删除ELK30天前的日志 #计算索引名称包含的日期&#xff0c;比如这里是 %Y.%m.%d (2023…

CSS学习笔记05

CSS笔记05 定位 position CSS 属性position - 用于指定一个元素在文档中的定位方式。top&#xff0c;right&#xff0c;bottom 和 left 属性则决定了该元素的最终位置。position 有以下常用的属性值&#xff1a; position: static; - 默认值。指定元素使用正常的布局行为&am…