分享
8月13日ComfyUI共学
输入“/”快速插入内容
☄️
8月13日ComfyUI共学
会议信息
会议主题:ComfyUI共学-WaytoAGI
会议时间:8月16号(周五) 19:50 - 23:11 (GMT+08)
参会人:
参会人信息统计
智能纪要
智能纪要依据会中总结与录制内容生成,不代表平台立场,请谨慎甄别后使用
📄
总结
会议讨论了 Confii、AI 绘图的诸多方面,如提示词、工作流、参数、模型等相关问题及解决办法。主要内容包括:
•
关于Confii的答疑与课程安排
:讨论了Confii相关的问题解答,如文档错误、更新方法、节点使用等,并介绍了课程安排,包括回顾名词、搭建比赛等。
•
正向和负向提示词的写法及相关要点
◦
正向和负向提示词的概念
:正向提示词是想要生成的内容,负向提示词是不想让其存在于画面中的内容。
◦
正面提示词的写法框架
:先写表达形式,如媒介和构图;再写主要内容,即画面主体;接着写场景,包括地点、时间等元素;然后写作品质量;之后写艺术风格;最后写氛围感和艺术家。
◦
提示词权重的影响
:提示词的位置会影响其在模型中的权重,强词应尽量往后调,避免权重过高的词过于靠前而吃掉其他提示词的权重。
◦
艺术家网站Art Station
:这是一个全世界艺术家放作品的网站,SD训练时会使用其中的图片,在提示词中加入相关表述会有较好效果。
•
关于AI绘图提示词及相关工具的介绍
◦
正向和负向提示词
:正向提示词描绘想要的画面元素,负向提示词排除不想要的元素。AI模型通过对正、负向提示词处理后的图片进行对比采样,使生成的图片更贴近正向、远离负向提示词。
◦
翻译节点
:介绍了两个可将中文翻译为英文的节点,一个是Web UI中的,另一个是Max live开发团队的,后者还能补充提示词,种子可控制生成结果的复现。
◦
自动提示词工具
:包括风格选择器,可选择正面和负面提示词,还有可分类选择人物特征及风格并预览图像的工具。
◦
自动分辨率工具
:解决了记分辨率的痛点,可将选择框的值转为输入参数,与图像的宽高等进行自动链接。
•
Stable Diffusion工作流及相关概念讲解
◦
自动化图像大小选择器的使用
:选择'to input'可进行连接以组合自动化的图像大小选择器,将'Latin'拖过去即可,方便快捷。
◦
节点恢复初始形式的方法
:右键节点,点击'fix node'可将节点转化为最初的形式。
◦
Stable Diffusion工作流中的节点功能
:Checkpoint Loader用于载入大模型,CLIP帮助模型理解提示词并连接到采样器,VE将图片处理成浅空间图片,KS Sampler采样器指导模型处理浅空间图片。
◦
模型处理图片的原理
:模型不能直接生成像素空间的图片,需引入浅空间概念进行数据压缩,降低计算量和处理难度,处理后的浅空间图片再通过解码器和VAE还原到像素空间。
◦
工作流中种子参数的作用
:种子用于生成模型处理图片的基础噪声,在config UI中用CPU产生噪声,在Web UI中用GPU加噪,即使种子相同,由于处理方式不同,结果可能不同。
•
关于图像生成中相关参数的介绍与讲解
◦
家噪影响方式
:UI 和 config UI 中家噪影响方式分别通过 CPU 和 GPU 运算,可通过特定节点在 config UI 中还原 Web UI 效果。
◦
种子的作用
:种子用于复原或复现生成的噪声,相同参数下能复现他人或自己之前的图片。
◦
控制参数
:包括控制生成前或生成后,有固定、递增、递减、随机四个选项,调试工作流时一般将种子固定以判断其他参数对图片的影响。
◦
部署次数
:模型对输入的浅空间图片采样次数影响图片效果,不同模型有合适的部署次数,可参考模型作者的推荐,一般 SD.5 基础模型在 20 步左右,部分加速模型 2 - 4 步即可。
◦
CFG 的作用
:CFG 是提示词引导系数,增大 CFG 会使图片更偏向提示词,但并非无限增大就能实现特定效果,一般 SD1.5 模型用 5 - 12 ,设置时可参考他人优秀图片的参数。
•
AI绘图中的图生图、采样器及放大方法
◦
图生图的噪声设置效果
:噪声为0时基本是原图,有编码解码导致的信息损失;噪声为0.5时保留原图部分内容并结合提示词和噪声生成新图;噪声为1时完全重绘,且初始参数不同结果不同。
◦
采样器参数讲解完毕
:完成了对采样器参数最多部分的讲解。
◦
图片预览的流程
:图片经过采样器处理后在浅空间,需解码拖回像素空间才能预览,整个流程是先编码、再采样、再解码。
◦
浅空间图片放大的两种方法
:一种是直接放大浅空间图片,放大后不能用decoder操作,需重新采样;另一种是用放大模型在像素空间放大重采样,放大后需打回浅空间再走流程。
◦
AI绘图比赛事宜
:要求在规定时间内手搭跑通的工作流并截图,包括图像生成和放大,上传工作流截图、JSON文件和生成的图片,不能使用他人工作流,节点可后续安装。
•
工作流整理及相关问题解答
◦
工作流节点的拖动操作
:可直接拖动单个节点到任意位置,也可按住Control键并用鼠标左键滑框选中多个节点,再按Shift键一起拖动。
◦
工作流节点的组合与编辑
:选中节点后右键新建组,可修改组名、颜色等,组被覆盖时可直接拖动组。
◦
工作流节点的对齐操作
:选中节点后右键选择对齐方式,如顶部对齐、左边对齐等。