造梦师手记:自然对话模式,SDXL时代最好用的提示词翻译插件
文章标签:
AI新闻资讯
造梦师手记:自然对话模式,SDXL时代最好用的提示词翻译插件

我曾经热衷于汉化stable diffsion的各种插件,尤其是提示词插件,我用了巨大的精力,搞了3000+的提示词。为了方便新手,甚至搞到了7.5万+的提示词清单,准备搞一波大的。

但是,当SDXL来临后,我意识到,这些操作已经变得毫无意义。

原因很简单,SDXL可以很好的理解自然语言。我们几乎无需对提示词进行各种权重的配置,就能用自然语言和SDXL对话,生成想要的画面。

当然了,SDXL现在能理解的,是英文,如何让它理解中文呢?

习惯用ChatGPT的小伙伴都了解,对于大模型来说,翻译太简单了,SDXL为什么没有呢?

不过没关系,有人做了基于大模型的翻译插件,挂在WebUI上,表现完美。

本来这个插件在SD1.5时代就已经开发完成,只是SD1.5对自然语言的理解非常粗糙,导致这个插件比较鸡肋,我用了几次后,干脆停用了插件。

没想到SDXL大模型到来后,让这个插件重新换发青春。

如果结合ChatGPT、Claude等生成式AI,SDXL会给我们非常惊艳的效果。

让我们一起编个故事。

故事梗概是一个女孩骑着大猫打败了恶龙。

先让Claude(或ChatGPT)来设计分镜:

扮演专业漫画家,给描写彩色漫画分镜脚本,详细描述画面的细节:剧情:一个女孩穿着盔甲骑着一只白色的大猫打败了恶龙分镜头一共4段完结,要求如下:
描写画面里出现的角色,描写每个角色的动作和神态,如果画面有多个人,必须要分别描述,描写写周围环境。

Claude回复:

第一格:一个约16岁的女孩站在峭壁边缘,身穿闪亮的银色盔甲,头顶一个尖尖的头盔。她有着一头红色长发,绿色的大眼睛中透着坚定。在她脚下是一只巨大的白色猫科动物,有着黄色的眼睛和流线型的身体。它的头顶两根尖耳朵立着,尾巴慢慢甩动。女孩正坐上这只大猫准备出发。背景是座火山,火山口冒出滚滚浓烟。天空乌云密布,偶尔闪过一道闪电。
第二格:接近镜头显示女孩骑在白猫背上,缓缓飞过烟雾弥漫的火山口。白猫的四肢伸展,爪子像钩子一样牢牢抓住岩石。女孩手持一柄银色宝剑,目不转睛地看向前方。在浓烟中隐约可见一个巨大的红色恶龙,它张开血盆大口冲女孩吼叫。
第三格:白猫飞到恶龙头顶,女孩高举长剑猛砍向恶龙。恶龙痛苦地仰头大吼,感到极度痛苦。
第四格:恶龙身负重伤,无力再战。女孩手持长剑,满脸胜利的笑容,高高站立在白猫背上。白猫也洋洋得意地看着打败的恶龙。背景是喷发的火山,为两者勾勒出壮阔的剪影。

启用翻译插件后,直接分批把中文贴到提示词界面。

第一格:

造梦师手记:自然对话模式,SDXL时代最好用的提示词翻译插件

除了这只猫有点小以外,整体画面非常符合预期。

第二格:

造梦师手记:自然对话模式,SDXL时代最好用的提示词翻译插件

喂,我的白猫黑化了吗?

SDXL在处理多个角色的时候,依然会有理解偏差。

第三格:

造梦师手记:自然对话模式,SDXL时代最好用的提示词翻译插件

哈哈哈哈,这次白猫长大了,不过恶龙怎么成了中国传统龙?

第四格:

造梦师手记:自然对话模式,SDXL时代最好用的提示词翻译插件

故事结束了,让我们看看这个翻译插件怎么用。

造梦师手记:自然对话模式,SDXL时代最好用的提示词翻译插件

安装并启用后,直接在提示词界面输入中文,插件会自动翻译成英文再送给SDXL,生成的结果里可以看到翻译好的英文。

安装地址:

https://github.com/ParisNeo/prompt_translator

安装后,首次使用会下载2个多G的语言翻译大模型,时间较长,耐心等待,下载完毕后,点击启用就可以了。

造梦师手记:自然对话模式,SDXL时代最好用的提示词翻译插件

启用成功后,可以直接在提示词栏输入中文。

分享到:
0
0

发表回复

猜你喜欢
近期文章
生成式AI看起来很美,ROI怎么算
利用生成式AI推动创新 美国本田这样做
东方Project-个人AI绘画合集-8(更新至2024-2-14)
AI绘画(动物科普)—兔狲
12.28乾坤AI日报 — 2023年度十大科技名词发布
近期评论
ai-world发表在
AI赛博机车—借助SD技术赚取第一桶金
mulei77发表在
AI赛博机车—借助SD技术赚取第一桶金
An Vũ( CEO AGBIG GROUP)发表在
12.25乾坤AI日报 — 苹果正购买新闻采集权用于训练生成式 AI