如何用 SD 训练一套贴纸 LoRA 模型

飞书用户4392

2024年1月2日修改

本篇介绍使用 SD 的LoRA训练方法，来制作一套风格稳定的平面贴纸的工作流程。演示所用软件为B站up主秋葉aaaki 提供的SD开源整合包和LoRA模型训练一键包

📌

@ 秋葉aaaki

最新一次更新整合包版本v4.5，11月更新。

本整合包支持SDXL，预装多种必须模型。无需安装python、cuda、git，无需任何配置解压即用​

【下载链接】

一键三连+关注 私信发送『整合包』可获得最新整合包+额外超多常用推荐大模型、LoRA​

百度盘：https://pan.baidu.com/s/1MjO3CpsIvTQIDXplhE0-OA?pwd=aaki

启动器在整合包的压缩包内置，为防止网盘链接炸掉，启动器运行依赖不再放在网盘内，将会在首次打开启动器时，弹出窗口跳转下载。​

一定要用网盘官方客户端下载，否则压缩包会损坏无法解压。下载完毕一定要先测试压缩包是否完好再解压！！！​

📌

@ 秋葉aaaki

LoRA模型训练一键包

百度盘：https://pan.baidu.com/s/1TBaoLkdJVjk_gPpqbUzZFw

提取码：p8uy

AutoDL 云端使用教程：https://www.bilibili.com/read/cv24050162

工作流

•
原始形象：MJ初步产出符合设计想法的贴纸原始形象​

•
二次加工：完成贴纸的白色边线等细节加工​

•
处理素材：给训练集图片打tag，修改tag​

•
训练模型：将上述处理好的数据集做成训练集，进行训练​

原始形象：MJ关键词

📌

A drawing for a rabbit stickers, in the style of hallyu,screenshot,mori kei,duckcore plush doll art exaggerated poses, cry/happy/sad/... --ar 3:4 --niji 5 --style cute --s 180 ​

兔子贴纸绘制的图画，采用韩流风格，截图，森喜朗，鸭核毛绒玩偶夸张的姿势​

•
会得到不同风格的贴图，我们可以先看看自己喜欢哪一种​

•
我一开始找的画面风格不是特别统一，但初次训练的时候不那么严格也是可以的​

•
出图过程可以有意识地总结这一类贴图都有什么特征：​
◦
都是可爱的兔子​
◦
有不同的衣服和头饰​
◦
都有一双大大的卡通眼睛，会有不同的面部表情​

common.docs_name - LarkCCM_Docs_Menu_Image

33%

注意事项：

•
关键词中限制了颜色，因此MJ生成的图片会一种情绪对应一种颜色，所以我们同一种情绪最好多生成几张不同色系的，可以减少后续训练中模型把情绪和颜色做挂钩（如果你需要这样的话，也可以反其道而行之）​

•
数据集中正面情绪与负面情绪最好比例差不多，如果都是正面积极的，在出一些负面情时（sad，cry）的时候，可能会出现奇怪的问题（如我们训练的是兔子形象，但ai认知的sad可能是人的形象，可能会出现人物特征）​

•
如果我们训练256*256大小的表情包，那么这样的素材就已经够用了​

•
如果要训练更高像素的图片，则需要进一步使用MJ垫图和高清扩展功能​

高清化

左（256）→ 右（1024）

如何用 SD 训练一套贴纸 LoRA 模型​

如何用 SD 训练一套贴纸 LoRA 模型