郑敏轩：Flux与MiniCPM、Joy Caption的强强联合

用户8537

用户1026

2024年9月25日修改

🎉

作者

Flux很强大，推高了开源图像生成质量，与此同时，优秀的MiniCPM和Joy Caption与Flux组合提供了强大工具的基础。​

有测评说效果上florence2＜MiniCPM-V＜Joy Caption，部分表现Joy Caption会稍不如意，但整体Joy Caption是强的，这个过程中florence2稍显弱了，但是推理速度快。所以我们本章来说说MiniCPM-V和Joy Caption这两个。​

在2024-09-19至2024-09-21的杭州云栖大会上，我们也见到了MiniCPM的身影：​

MiniCPM-V

1.
话不多说，我们上节点：MiniCPM-V-2.6-int4​

方法一：最简单的可以从节点管理器中安装（注意结尾是-V-2.6-int4的那个）：​

在manager管理器中安装

方法二：或在秋叶包中安装（注意结尾是-V-2.6-int4的那个）：​

或在秋叶包中安装

方法三：或者直接下载下面文件解压，复制ComfyUI_MiniCPM-V-2_6-int4文件夹到你的“\ComfyUI\custom_nodes”目录下。注意ComfyUI_MiniCPM-V-2_6-int4文件夹里面直接就是如下图的多个文件不能再包文件夹了。​

🎼

提取码：jdei

2.
节点安装好后，还需要模型，​

模型下载地址（解压后大小5.55G，压缩包大小4.85G）：

✍️

夸克网盘：我用夸克网盘分享了MiniCPM-V-2_6-int4.rar

百度网盘：通过百度网盘分享的文件：MiniCPM-V-2_6-int4.rar

提取码：bred

3.
模型下载好后放在：comfyui/models/prompt_generator/MiniCPM-V-2_6-int4​

4.
导入基础工作流验证​

Chat_with_single_image_workflow_polished.json

4.77KB

基础工作流验证

郑敏轩 ：Flux与MiniCPM、Joy Caption的强强联合​