前言
AI绘图基本上使用的是英文提示词, 无法识别中文, 这对于英文不太好的小伙伴而言是一道阻碍
这个世界, 有需求就会有解决方案
这不 我们只需要使用第三方的插件就能实现在ComfyUI
中使用中文提示词来绘图
其原理 其实就是内部翻译😂
需要安装的插件
需要下载的模型
需要一个基础大模型,和一个优化模型以及一个VAE模型, 具体可自行选择下载
这里大模型我使用的是Juggernaut_RunDiffusionPhoto2_Lightning_4Steps
模型, VAE模型使用的是vae-ft-mse-840000-ema-pruned
模型
- Juggernaut_RunDiffusionPhoto2_Lightning_4Steps模型 : 该模型放置到
ComfyUI/models/inpaint
目录下 - vae-ft-mse-840000-ema-pruned : 该模型放置到
ComfyUI/models/vae
目录下
开始实现
这里以简单的文生图为例
启动
ComfyUI
创建节点
主要用到五个核心节点
Text Input
节点 : 在该节点中填入中文提示词Deep Translator
节点 : 将中文提示词翻译成英文Loader SDXL
节点 :Ksampler SDXL
节点 :Save Image
节点 : 用于保存生成的图片
完整的工作流如下:
效果如下
可能是我的翻译出了问题, 结果有点差强人意, 大家可以自行尝试一下
其它实现方式
除了使用插件实现之外, 我们还可以使用腾讯出品的混元DIT中文理解模型
我们可以在ComfyUI
平台上使用混元模型, 具体的用法可参见GitHub
整合包
混元DIT模型和工作流下载:
本文为作者原创 转载时请注明出处 谢谢