关于stable diffusion的embedding训练的一篇随笔

前言

嗯,因为最近ai绘画很火啊,而且可以本地部署,很多人开始投喂ai然后画一些喜欢的东西,这是刚接触4天的笔记,那么我整理下目录,来展示一下这篇笔记都有什么吧。

1,绘画的关键词和反向关键词

2,调参,高清与面部修复

3,embedding模型的训练素材准备与原理建议

4,炼丹注意事项

那么首先来聊第一条

关键字:这个运行原理是根据一个大模型(下载之后的model),也就是你安装之后的大致这个路径下的文件,以.ckpt结尾

models\Stable-diffusion

你是可以通过C站来下载这些(需要魔法),C站本身并不是特别稳定,而且还有一些小bug,这边推荐小猫,不过你既然已经看到训练的篇幅了,那么说明你已经有些了解了,并且一般安装之后是会自带一个model的,所以不用担心。因为除非自带的有特别说明,否则不会对某类图片绘画有特殊偏向。比如我下了一个cat宠物猫模型,那么即使我输入的和猫无关词汇,仍会有关于猫的图片生成。
好了,现在我们聊一下关键词。字面意思,这个就是你希望ai画些什么,又不希望画什么,在没有一个很好地模型的初期,当然是越详细越好,你可以通过百度翻译或者CHATGPT的对话,来把你需要的关键字转换为英文,可以用","或者空格隔开。当然,你也可以用一些已经训练好的模型,从点击这里,我们可以在主页面上选取需要的下载好的模型。
在这里插入图片描述
再特别聊一下反向关键字,这个选词的时候一般很抽象,比如我想画一张景色图,那么正向关键词我可能会填:杰作,春天,湖畔,山边,蓝天(以上都需要英文)这一类的词。那么反向关键词我会填:低质量,模糊不清,这一类的词汇,因为在没有练出具体风格的时候,我们完全不了解会出现什么问题,把问题写在这一栏,就可以减少出现概率。
(不过这还是无法完全避免,比如初期我尝试画furry风格的图片,总是会出现3条以上的尾巴,即使我规定正向:一条尾巴;反向:尾巴超过一条,仍然可能会让ai理解错误,这类东西需要我们慢慢来。

第二条调参,面部与高清修复

在这里插入图片描述
可以看到东西很多,不过初期我们可以调动的参数一般是:
采样方法,采用迭代步数,面部修复,高清修复,高度宽度,提示词相关性,生成批次和数量。
采样方法可以凭自己喜欢来挑,采用迭代会增加你显卡的转速(不是),让你的出图质量提高,面部修复指的是,有时候你的绘画可能出现各种掉san的问题,比如没有鼻子,嘴歪眼斜,甚至有两张嘴,两个鼻子这一类问题,这个重绘幅度默认是0.7,我们一般不需要去调整这个属性,有条件的可以开启,会大幅缩短你炼丹准备时间。
高清修复顾名思义,就是更清晰,你可以选择不同的放大算法来让图片质量更高,不过过于手绘的个人建议不开,这个默认开启是两倍放大,并不会对画内容本身重绘。
批次和数量就是你希望画多少次,每次多少张,比如出去散步可以挂80-100张,回来之后就可以查看抽卡绘画的结果啦。相关性并不是越高越好,很多时候你并不知道自己想要什么,ai的一个错误理解有时会把你希望的画面提升不止一个层次,这有点像写了一个bug,但是这个bug没有显著危害,甚至有收益,那我们就用就好啦,需要自行斟酌,调高一点点或者保持现状。

素材准备与训练事项

首先,你已经准备要训练一个画风,那么你需要有至少50张图,这里要求画风相同,严禁混合,清晰度尽量一样,你可以用自己ai画的图来炼丹,这样可以很大程度减轻这个问题,我们可以在这个页面来做最开始的准备。
在这里插入图片描述
创建一个名称,初始化文字可以不填写,词元向量看自己需求,一般从7-16,大概是从ai画风练习到ai画师练习,画师练习指的是更加专一的一类,比如动物。画风没有这么苛刻,比如中世纪风,赛博风,这一类的。

图像预处理

在这里插入图片描述
一般来说按照这个页面填写就可以,原目录即是你自己打算训练的图库,目标目录需要你自己在桌面上或者某个位置新建一个空白文件夹,并把文件位置填写上,然后我们点预处理就好了。

炼丹事项:

1,炼丹对电脑配置要求很高,一般来说,不建议a卡,显存8g以下是练不了的,当然也有方法,不过麻烦就是了。
2,你并不需要一个100%训练的ai,反复跑画风并不一定会得到你满意的结果。

最后,炼丹开始

在这里插入图片描述
最大步数根据你自己需要。画风15000-18000差不多就行,画手3-4w差不多,数据集目录就是上文让你新建的文件夹目录,下面打钩按图走,其他所有参数都不需要改,然后点击左下角训练即可。然后你就可以挂机干别的去啦~比如补补番,玩玩手机,总之,训练会消耗非常大的资源和很长的时间,这个时间基本就告别电脑游戏了,消耗最高的一次是我跑的环境是15g显存,稳定占用14.7g。
最后,有刚研究的小白可以一起聊一聊,评论私信都可。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/22075.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

图像处理:Tiler制作你的专属卡通头像和LOGO(圣诞特别篇)

目录 0 前言1 安装与贴图2 算法原理2.1 计算像素频率2.2 计算像素相对距离2.3 计算合适贴图 3 配置功能4 使用:以圣诞老人为例推荐内容 0 前言 Tiler是一种使用各种其他较小图像平铺创建新图像的工具,它与其他马赛克工具不同,因为它可以适应多…

ChatGPT 3.5 的回答只能基于 2021年中期

ChatGPT 无法通过 internet 来访问 2021 年中期之后的数据。 比如无法列举 2021年 IT 界发生的新闻。 2021年的新闻则可以列举出来 以下是2021年IT界十大轰动性的新闻: 苹果公司推出 M1 芯片:苹果公司在2020年底发布了第一批基于自研M1芯片的Mac电脑&…

爆发了!ChatGPT的王炸级更新

最近ChatGPT在互联网行业有多火?恐怕不用小灰多说,大家心中自有答案。 不过,尽管ChatGPT很厉害,但是却存在一个局限。你向它了解最近两年的内容,它都会回复不支持。这是因为ChatGPT模型训练用的是2021年9月之前的数据&…

2021-11-12

高三家长如何填写高校录取志愿事宜 高三家长陪考的目就是和孩子一起经历高考和健康成长的过程,高考成绩真的无法估计,可能超常发挥可能发挥失常,我们从考得好”和“报得好”这两个方面来说了,那么作为家长,要为孩子准…

30 我上车则被套的故事【2019-11-03 2242】

今天我们轻松点,聊聊车。 香港人把买房叫做上车。“不管那么多,赶紧先上车。”这是老一代对年轻人的实用主义传承。在财富积累赛道,上车意味着速度更快;而没有上车的话,个人的发展跟不上城市的发展,在城市发…

普通话证书手把手入门考取流程

简介:普通话证是很有用的一个证书。现在考取后是终身的有效期限。建议大家可以考取一个。 作用:可以认定一些职位所需。例如:教师资格证认定,播音员认定。。。那么,普通话考试考取内容是什么?怎么报名&…

广州华龙展贸考场——科目三

前言:不同考试时间可能考试规则和路段考点会变,仅供参考,以练车为准。2021/05/17考试记录。 一、灯光考点 传祺车灯光视频操作:点击这里 二、科三考试注意细节: 1、换挡不要低头看挡位,否则扣100分

宁海中考政策计算机考试合格,宁海中考指南!同学们、家长们你们准备好了吗?...

原标题:宁海中考指南!同学们、家长们你们准备好了吗? 高考结束了 那么接下来的重点就是中考了! 这也是至关重要的一步 同学们要加油了 今年我县参加初中生学业水平考试报名总人数为6190人,比去年增加52人。 宁海中学创新实验班提前…

广东省考计算机类的比例,广东公务员考试22.4万人参加 竞争比例为19:1

▲昨日,广东公务员省考举行,中午12时30分左右,华南师范大学考点一名考生步出考场。 记者邱伟荣 摄 文/ 记者廖靖文 通讯员符信、粤仁宣 昨日,广东省2011年考试录用公务员“四级联考”笔试在省直和20个地级以上市(不包括深圳市)同步…

2021固原一中高考成绩查询榜,【拍客】2021年固原高考落下帷幕,这些感人瞬间将被永远铭记...

十年磨一剑,一朝试锋芒。6月8日下午,2021年高考落下帷幕,全市一万三千余名考生从各考点走出,不少人大声欢呼、高兴拥抱,有的家长则给考生送上鲜花,祝愿孩子前程似锦。 原州区四个考点 与他们并肩同行的还有…

2023年天津理工大学中环信息学院专升本专业课考试考前安排

2023年天津理工大学中环信息学院高职升本科专业课考试考前提醒 1.考试时间为12月29日上午9:00--11:00,9:00开考后,禁止进入考场参加考试,建议考生提前40分钟到达考点。 2.准考证打印时间为12月27日至29日&#xff0c…

中国农业大学2022年法学硕士研究生拟录取名单

中国农业大学2022年法学硕士研究生拟录取名单 资料的录取名单录取为中国农业大学学校官网公布的,准确性可以得到保证,可以放心使用。通过拟录取名单可以更好的了解当年进入复试的分数线,可以从侧面了解该校该专业的报录比,了解对…

110.【十万字带你深入学习23种设计模式】

Java 23种设计模式 (一)、设计模式相关内容介绍1.软件设计模式概述(1).软件设计模式的产生背景(2).软件设计模式的概念(3).学习设计模式的重要性(4).设计模式分类 2.UML图(1).类图概述(2).类图的作用(3).类图表示法 3.软件设计原则(1).开闭原则 (重写不修改)(2).里氏代换原则 (…

要裸辞考公务员吗?

问: 发哥晚上好,打扰了,我是「15级电子工程专业」,不知道你对裸辞有什么看法? 说一下我自身的情况: 1.毕业四年,现在在做C设备端业务开发(安防行业、高速公路部门)&#…

漫谈程序员系列:看看你离优秀有多远

前段时间(大概是8月份吧)我终于拿到了驾照,科目一、科目二、科目三、科目四都是一次性过的,没有给教练塞钱也没有给教练递烟。考科目三(路考)时,有个女生没能通过还被陪考员讽刺,伤心…

要建立亲密的关系,就必须少一些指责,多一些倾听

于万千人中,遇见你| 第102篇 可以毫不掩饰的说,我希望能够和我爱的人共筑一个百年好合的爱巢——我们互相坦诚,互相需要,互相照顾,互相体谅,总之,最好没有伤害、没有争吵、没有烦恼。…

1024 的那天,我这个三线的程序员是这样度过的

10 月 24 号,也就是程序员节,怎么来的呢?我来给不是程序员的读者朋友们普及下,相信你们也很感兴趣,为什么这一天这么多程序员职业的朋友会在朋友圈给自己庆祝? 当然不会无缘无故的来: 1024 是 2…

郑州家长租房车“花式“陪考上热搜,宇通房车备受关注

经历了种种波折,对多地高三考生而言,2020年高考终于落下了帷幕。高考是千万考生们的“战场”,同样也是家长们的“战场”,每年高考,为了给孩子最大的帮助和支持,家长们都会守在场外,想出各种奇招…

为什么ChatGPT等AI应用使用强化学习而不是监督学习

我也是无意中入了强化学习的领域,因为我原本研究云计算的任务调度,我发现近几年的工作都是基于强化学习的。所以感觉强化学习一定是大趋势,恰好现在ChatGPT这些人工智能产品出现,更是助推了强化学习的风。那么为什么ChatGPT使用强…

82页PPT | 斯坦福最新ChatGPT: 提示学习, 指导微调和RLHF

今早在推特上刷到斯坦福的课程,终于开始讲ChatGPT了,但是视频还是没有放出来,不过PPT放出来也已经很不错啦。 一共82页,放不完,下面截图几个重要的slide: 课程链接:https://web.stanford.edu/cl…