前面提到,在提示词中可以使用LoRA并设置权重。LoRA是Low-Rank Adaptation的简写,直译为轻量级微调,是一种通用的AI大模型微调技术,通过LoRA使用可以对Stable Diffusion模型输出进行微调型,更加随心所欲地实现定制华输出。LoRA模型无法单独使用,需要选择一个Stable Diffusion模型作为基础,再使用LoRA调整基础模型,从而生成微调后的图片。同时,如果Stable Diffusion模型是XL版本的,相应的LoRA也需要选择XL版本。
在前面的模型篇中,推荐著名的模型下载的地址LiblibAI·哩布哩布AI - 中国领先的AI创作平台。注意点击最右方“全部类型”下拉选择框,筛选类型为LORA的模型文件。
模型文件一般不大(100-200MB为主),下载后,将模型文件放在Stable Diffusion(或绘世启动器)安装目录的models\Lora文件夹下(如果使用Easy Diffusion,则是在安装目录的models\lora文件夹下,其他也差不多),即完成安装。
在Stable Diffusion主页面,先点击Lora,再点击右边的刷新按钮,即可完成LoRA模型的引入。
使用提示词woman,moyou, solo, on side, dress, lying, black hair, blue dress, snow, blue eyes, blue theme, looking at viewer, bare shoulders, lips, hair ornament, bare arms, A Beautiful Chinese Woman, <lora:DetailedEyes_XL_v3.0:1>,
LoRA模型文件通常不大,但结尾也是.safetensors。有时候可能会与主模型文件混淆。这里提供一个网站。Stable Diffusion 法术解析 (novelai.dev) 打开以后可以将模型文件拖上去,就可看出是主模型文件,还是LoRA模型文件。