分享
提示词自动生成 ComfyUI 工作流来了! (英伟达整花活, 把 ComfyUI 的门槛打下来!
输入“/”快速插入内容
提示词自动生成 ComfyUI 工作流来了! (英伟达整花活, 把 ComfyUI 的门槛打下来!
用户4389
用户4389
用户4392
用户4392
2024年10月22日修改
🐵
在多次社区的 ComfyUI 共学中发现, ComfyUI 工作流的门槛确实过高。 让很多人理解“潜空间”, “Vae”, “LoRA”, “controlnet”等一系列概念非常困难, 更别说基于理解做一个工作流了。
这次英伟达整了个花活, 让大家看到了打破这个门槛的可能性:
🌈
通过画图提示词, 自动生成匹配的 ComfyUI 工作流!
英伟达将其命名为 ComfyGen (comfy 生成器)! 当然目前仅支持文生图模型。
在英伟达发布的内容中, 他们称: “ComfyGen 可以生成高质量的图并泛化到其他领域 (如下图)。 ”
并且他们很自豪的宣称:“下图这么优秀的图, 完全是 ComfyGen 基于 SDXL 规模的模型画的, 还没有用 flux 呢!”
当然, 作为学术性研究论文, 肯定不会很草率的下结论。
英伟达团队做了对比测试:
下图中分别为
1) SDXL 原生
2) 两个微调模型 (用过的同学会很熟悉
3) 两个人搭的工作流
4) 两个不同的 comfyGen 制作的图 (后文原理部分中会说明这两者的区别)
可以看到效果基本一致, 甚至确实更符合人类对提示词的判断和理解。