ComfyUI实现使用中文提示词

前言

AI绘图基本上使用的是英文提示词, 无法识别中文, 这对于英文不太好的小伙伴而言是一道阻碍

这个世界, 有需求就会有解决方案

这不 我们只需要使用第三方的插件就能实现在ComfyUI中使用中文提示词来绘图

其原理 其实就是内部翻译😂

需要安装的插件

需要下载的模型

需要一个基础大模型,和一个优化模型以及一个VAE模型, 具体可自行选择下载

这里大模型我使用的是Juggernaut_RunDiffusionPhoto2_Lightning_4Steps模型, VAE模型使用的是vae-ft-mse-840000-ema-pruned模型

开始实现

这里以简单的文生图为例

  1. 启动ComfyUI

  2. 创建节点

    主要用到五个核心节点

    • Text Input节点 : 在该节点中填入中文提示词
    • Deep Translator节点 : 将中文提示词翻译成英文
    • Loader SDXL节点 :
    • Ksampler SDXL节点 :
    • Save Image节点 : 用于保存生成的图片

    完整的工作流如下:

    image-20240524123539558

  3. 效果如下

    image-20240524124526402

    可能是我的翻译出了问题, 结果有点差强人意, 大家可以自行尝试一下

其它实现方式

除了使用插件实现之外, 我们还可以使用腾讯出品的混元DIT中文理解模型

image-20240526195104119

image-20240526195153156

点击进入官网

点击进入混元GitHub

我们可以在ComfyUI平台上使用混元模型, 具体的用法可参见GitHub整合包

点击进入ComfyUI_ExtraModels

混元DIT模型和工作流下载:

image-20240526195807901

点击进入夸克下载

本文为作者原创 转载时请注明出处 谢谢

ACG作坊– 分享动漫制作的博客站

0%