紫色梦烙印 发表于 2024-7-15 18:34

喂饭级stable_diffusion_webUI调参权威指南

又见面了,让我们直奔主题。
这期假设你当地已经装好了stable_diffusion_webUI。如果还没,请参考以下文章进行当地安装
6-7更新,全网最新训练本身想要的模型(cpu,gpu方案均有)————————————————
6-4更新,音频输出当地部署配置训练攻略(附yanzi清唱素材)————————————————
4-14更新,使用controlnet进行图生图攻略————————————————————————
也可以使用docker进行容器化部署,更便利,不外使用前确保docker是最新版本。
安装好可以正常导入模型输出作品后,是不是拿到常用的civi模型产出的作品总是那么差强人意,不是脸崩了,就是手崩了。作者也是从各种奇形怪状的输出中培训出来的~~~输出些我精心打磨过的作品
















那么如何跑出斗劲对劲的作品呢,大师在输入泡泡玛特(prompt)时谨遵以下法则即可,或者可以去civital模型网站参考示例,摸索着跑一些
词缀获取渠道


[*]词图 Prompt Tool:


[*]无界:
tag自动补齐插件


[*]插件名称:tagcomplete安装完成后按照教程更新翻译库


[*]关键词缀:Trigger Words在使用某些lora模型的时候,需要使用官方提供的trigger words作为词缀,用于在单个lora中准确的导向分歧的风格。由于没有预览图和备注,词缀很难使用,在复杂环境也很难分辩有没有生效。建议安装civitai helper用于自动生成预览图与trigger words。
<hr/>1、提示词对照表

反向常用:((ugly))),(((duplicate))),((morbid)),((mutilated)),(((tranny))),(((trans))),((trannsexual))),(((mutation))),(((deformed)))(((long neck))),((bad anatomy))(((bad proportions))),(((extra arms))),(((extra legs))), (((disfigured))),((more than 2 nipples))),malformed,mutated,(hermaphrodite),((extra limbs)).((missing arms)).((missing legs)).((poorly drawn hands))((poorty drawn face)),(mutation,poorly drawn :1.2),(long body :1.3).multiple breasts,cloned face,gross proportions, mutated hands,bad hands,bad feet,long neck,missing limb,(malformed limbs),malformed hands,(fused fingers).(too many fingers),extra fingers,missing fingers,extra digit,fewer digits,(mutated hands and fingers :1.5),low res,text,error,cropped,worst quality,low quality,normal quality,jpeg, artifacts, signature, watermark, username, blurry, text font ui,futa,yaoi,
画质常用:masterpiece, best quality, masterpiece,best quality,official art,extremely detailed CG unity 8k wallpaper,
地址常用:steam, in the cyberpunk city, explosion, underwater, flower field, fireworks, intense shadows, strong rim light, golden hour lighting, sky, sea, mountain, on a hill, the top of the hill, in a meadow, plateau, on a desert, cityscape, in hawaii, landscape, beautiful detailed sky, beautiful detailed water, on the beach, on the ocean, beautiful purple sunset at beach, over the sea, in the ocean, against backlight at dusk,
风格常用:artbook, game_cg, comic, 4koma, animated_gif, dakimakura, cosplay, dark, crossover, light, night, guro, realistic, photo, real, landscape/scenery, cityscape, science_fiction, original, parody, personification, checkered, highres, lowres, absurdres, column_lineup, everyone, expressions, profile, bust, back, sample, album, covr, silhouette, what, artist_request, tagme, bad_id, watercolor_(medium), traditional_media, translation_request, Japanese, sketch, fine_art_parody, French, optical_illusion, zoom_layer, colorful, monochrome, gradient_background, pixel_art, wallpaper, simple_background, huge_filesize, incredibly_absurdres, transparent_background,
角色常用:girl, little boy, shota, loli, kawaii, mesugaki, adorable girl, bishoujo, sisters, gyaru, ojousama, mature female, mature, female pervert, milf, harem, angel, cheerleader, chibi, crossdressing, devil, doll, elf, fairy, female, furry, orc, giantess, harem, idol, kemonomimi_mode, loli, magical_girl, male, maid, mermaid, miko, milf, minigirl, monster, multiple_girls, no_humans, ninja, nun, nurse, shota, stewardess, student, trap, vampire, waitress, witch, yaoi, yukkuri_shiteitte_ne, yuri,
自考虑:easynegative,toony,dated,line art,flat colors
中英文对照

[*]提高图像质量的正向提示词
正向提示词描述HDR, UHD, 8K (HDR、UHD、4K、8K和64K)这样的质量词可以带来巨大的差异提升照片的质量best quality最佳质量masterpiece杰作Highly detailed画出更多详细的细节Studio lighting添加演播室的灯光,可以为图像添加一些标致的纹理ultra-fine painting超精细绘画sharp focus聚焦清晰physically-based rendering基于物理衬着extreme detail description极其详细的刻画Professional插手该词可以大大改善图像的色彩对比和细节Vivid Colors给图片添加鲜艳的色彩,可以为你的图像增添活力Bokeh虚化模糊了布景,突出了主体,像 iPhone 的人像模式(EOS R8, 50mm, F1.2, 8K, RAW photo:1.2)摄影师对相机设置的描述High resolution scan让你的照片具有老照片的样子赋予年代感Sketch素描Painting绘画

[*]艺术风格代表的提示词插手对应类型画家的风格,提升我们的照片效果。
艺术风格艺术家肖像画(Portraits)Derek Gores, Miles Aldridge, Jean Baptiste-Carpeaux, Anne-Louis Girodet风光画(Landscape)Alejandro Bursido, Jacques-Laurent Agasse, Andreas Achenbach, Cuno Amiet恐怖画(Horror)H.R.Giger, Tim Burton, Andy Fairhurst, Zdzislaw Beksinski动漫画(Anime)Makoto Shinkai, Katsuhiro Otomo, Masashi Kishimoto, Kentaro Miura科幻画(Sci-fi)Chesley Bonestell, Karel Thole, Jim Burns, Enki Bilal摄影(Photography)Ansel Adams, Ray Earnes, Peter Kemp, Ruth Bernhard概念艺术家(视频游戏)(Concept artists (video game))Emerson Tung, Shaddy Safadi, Kentaro Miura

[*]常用的反向提示词
反向提示词描述mutated hands and fingers变异的手和手指deformed畸形的bad anatomy解剖不良disfigured毁容poorly drawn face脸部画得不好mutated变异的extra limb多余的肢体ugly丑恶poorly drawn hands手部画得很差missing limb缺少的肢体floating limbs漂浮的四肢disconnected limbs肢体不连贯malformed hands畸形的手out of focus脱离焦点long neck长颈long body身体长

[*]视角
提示词描述dynamic angle动态角度from above从上方from below从下面wide shot广角宽景Aerial View空中俯瞰视图

[*]主体远近
提示词描述full body shot全身cowboy shot半身close-up shot接近

[*]光线
提示词描述cinematic lighting电影光dynamic lighting动感光

[*]视线
提示词描述looking at viewer画面中的物体或人物在直接面对画面或不雅观众looking at another两个角色正在彼此交流或对视looking away看着此外标的目的,不直视对方looking back回头看looking up摄像机或不雅察看者的视角调整为向上看

[*]画风
提示词描述sketch, one-hour drawing challenge草图、速写、手绘风photograph, photorealistic照片

[*]身体指定表情
提示词描述blush脸红wet sweat大汗flying sweatdrops飞汗

[*]衣服指定制服
提示词描述china dress旗袍sailor dress水手服school uniform校服sailor senshi uniform《美少女兵士》中兵士们穿戴的制服,水手服不多说了。。。

[*]风光指定
提示词描述underwater水下shinto shrine神社......等等
这些都可以在
中生成。
<hr/>2、进阶使用 - 权重语法

权重逻辑


[*]若是想明确某主体,该当使其生成法式向前,生成法式数加大,词缀排序向前,权重提高。画面质量 → 主要元素 → 细节
[*]若是想明确风格,则风格词缀该当优于内容词缀画面质量 → 风格 → 元素 → 细节
[*]未证实:风格权重或许需要优于画面质量,从而不至于被画面质量污染特殊风格质感。
分割符


[*], 逗号:分割词缀,有必然权重排序功能,逗号前权重高,逗号后权重低,因而建议排序:
综述(图像质量+画风+镜头效果+光照效果+主题+构图)
主体(人物&对象+姿势+服装+道具)
细节(场景+环境+饰品+特征)举例一:
// 超高分辩率, 8k, 漫画风, 相机取景框,一个男子, 奔跑(动词原型), 黑色头发, 橙色太阳, 蓝色天空
absurdres, 8k, comic, viewfinder, 1male, run, black hair, orange sun, blue sky,

按照上面的提示出的图,各元素都呈现了,但是并没有实现run这个关键词,除了第一张图左下角几个奔跑的人物外,第三张图更是人物都没有了。
举例二:
// 超高分辩率, 8k, 漫画风, 相机取景框, 一个男子, 奔跑(此刻分词), 黑色头发, 橙色太阳, 蓝色天空
absurdres, 8k, comic, viewfinder, 1male, running, black hair, orange sun, blue sky,

而当我们把run改为running时,跑步的姿态就出来了~~。
组合符


[*]: 冒号:自定义权重数值格式:左圆括号 + 词缀 + 冒号 + 数字 + 右圆括号
// 单人女孩词缀,权重为0.75
(1girl:0.75)

[*]() 仅圆括号:增加权重0.1大部门情况用圆括号即可。
// 权重乘以1.1
(1girl)

[*]{} 花括号:增加权重0.05
// 权重乘以1.05
{1girl}

[*][] 方括号:减少权重0.1,也有说是减弱0.05的方括号中无法自定义权重数值,自定义权重只能使用(x:0.5)形式。
// 权重除以1.1


[*](())、{{}}、[[]] 复用括号:叠加权重
// 权重乘以1.1*1.1,即权重为1.21
((1girl))一般流程:先把要描述的画面写下生成一次,按照生成成果边试边改不对劲或遗漏的描述,要强调的概念用 (xxx: 1.x ) 语法形式来提升权重,此中 xxx 是你要强调的词,1.x 代表要提升的比例,如 1.5 就是提升 150% 的权重。权重取值范围 0.4-1.6,权重太小容易被忽视,太大容易拟合图像犯错。例:(beautiful:1.3) 。叠加权重:通过叠加小括号方式提高权重,每加一层相当于提高1.1倍权重,例:((((beautiful eyes))))连接符


[*]AND 和:将多个词缀聚合在一个提示词挨次位置中,其初始权重一致
// 三个词缀权重一致
bird and dog and pig

// 可使用冒号标识表记标帜其权重
bird:1.5 and dog:1.2 and pig:0.8

[*]+ 加号
(red hair:1.1)+(yellow hair:1.25)+(green hair:1.4)

[*]| 竖线
(red hair:1.1)|(yellow hair:1.25)|(green hair:1.4)

[*]_ 下划线
(red hair:1.1)_(yellow hair:1.25)_(green hair:1.4)

[*]什么都不加
(red hair:1.1)(yellow hair:1.25)(green hair:1.4)

[*], 逗号对象一致时,逗号有连接的功能
(red hair:1.1),(yellow hair:1.25),(green hair:1.4)<hr/>3、分布与交替衬着

[] 方括号中使用:、| 等符号,则可实现较为复杂的分布与交替衬着的需求。

[*] [元素1:元素2:法式比例] :衬着元素1到多少进度后开始衬着元素2,实现元素1与元素2的互相叠加,有类似于的感觉,可用于两个词条的融合
// 衬着蓝色到40%进度后,开始衬着红色


// 前12步衬着蓝色后,开始衬着红色
注:step > 1 时暗示该组合在前多少步时做为 A 衬着,之后作为 B 衬着。step < 1 时暗示迭代步数(参与总法式数)的百分比。

[*] [元素1:法式比例] :从多少进度开始衬着元素1
// 在执行40%的法式后,开始衬着蓝色

// 在执行15步之后,开始衬着蓝色


[*] [元素1::法式比例]:衬着到多少进度的时候遏制元素1的衬着(其它元素的衬着继续)
// 在执行了40%的法式后,遏制衬着蓝色

// 在执行了15步后遏制衬着蓝色


[*] [元素1|元素2]:元素1和元素2的交替混合衬着
// 融合蓝色与红色,紫色?

// 某物与某物的交替演算,用于生成融合生物,句中词缀含义为融合牛与马。
本质为一种在平等权重下融合词缀生成单个元素,不限制混合元素的数量。

[*]C [元素1|元素2]元素3:括号外加词缀意味着融合过程中的共享元素。
<hr/>举例七:
// 一个蓝红混色染发的短发女孩
1girl, hair, short hair

举例八:
// 合成“空中的鸟”与“空中的飞机”
in sky

好诡异的合体~~
举例九:
颠末学习,此刻我们操作第一个例子中的词缀再搞几个画面练手。
// 哇哦哇哦哇哦
absurdres,8k, comic, , 1male+running, 1female (hair)(long hair) jumping, [], , (bird and horse) in sky,

注意:因为插手了动物,所以femal和male可能被AI识别为雌性、雄性。。。目前发现仅用文字描述同一场景多人物,很难成功生图,看案例中男女混合了,还有很多错误的图我都没放上来。可能需要插手很多负面提示词来控制污染,而且要把分歧人物的位置、状态明确告诉AI,这样成功几率才大。建议还是操作手稿、controlnet等方式来共同实现。举例十:
反不雅观单场景单人的实现就出格容易了,这或许也是为什么很多AI图片网站的成图都是单人肖像的原因。
best quality, very detailed, absurdres,8k, comic, , one lady with long hair is sitting on ground, birds around her, blue sky+,

这里的提示词使用了人类的英文阅读格式~~
<hr/>4、调取 LoRA & Hypernetworks 模型


[*]<> 尖括号:调取LoRA或超网络模型等。输入:<lora:filename:multiplier> 或 <hypernet:filename:multiplier> 可调取相应模型。
<lora:cuteGirlMix4_v10:0.5>注:要先确保在【…\models\lora】或【…\models\hypernetworks】文件夹已保留好相关模型文件。不会放的去参考这篇文章
<hr/>tips:给模型添加预览图(preview)


新版webUI自带模型预览图功能,默认当地所有模型上都显示 no preview 即没有预览图,我们可以生成完图片后 再次找到添加模型的位置,鼠标移动模型卡标题处,上方会呈现replace preview(替换预览)红色字样 点击即可将方才生成的图设置为此模型的预览图
如果想把任意一张图片设置为模型的预览图,可以将图片拖拽到img2img中 然后进行替换.



<hr/>站在巨人们的肩膀上

模型资源(道具商店)


[*]Civitai | Stable Diffusion models, embeddings, hypernetworks and more
[*]huggingface.co/
[*]原神 | SD - WebUI 资源站 (123114514.xyz) 模型太多了,很国内味
[*]ChilloutMix | Stable Diffusion Checkpoint | Civitai
[*]Realistic Vision V1.3 | Stable Diffusion Checkpoint | Civitai 写实风格
[*]lllyasviel/ControlNet at main (huggingface.co)
[*]webui/ControlNet-modules-safetensors at main (huggingface.co)
[*]Korean Doll Likeness | Stable Diffusion LORA | Civitai
[*]LoRA 指南 - 知乎 (zhihu.com) ==LoRA: Low-Rank Adaptation of Large Language Models

调参教程(魔导书)


[*]Disco Diffusion (notion.site) 建议细读, 非原创聚合型文档,偏速查东西属性
[*]Discover and generate AI Art | OpenArt ==语句和参数的参考分享
[*]咒语生成器 | 无界AI (wujieai.com) ==中英文可选,666
SD 关键词参考


[*]arthub.ai/
[*]lexica.art/
[*]www.krea.ai/?continueFl…
[*]promptomania.com/stable-diff…
他人的最佳实践


[*]模型应用---使用Stable Diffusion UI手册 - 知乎 (zhihu.com) UI上参数的翻译以及解释
[*]AbdullahAlfaraj/Auto-Photoshop-StableDiffusion-Plugin: A user-friendly plug-in that makes it easy to generate stable diffusion images inside Photoshop using Automatic1111-sd-webui as a backend. (github.com)
[*]PS上的开源Stable Diffusion插件来了:一键AI脑补,即装即用 - 知乎 (zhihu.com) ==集成到ps中作为插件
[*]hua1995116/awesome-ai-painting: AI绘画资料合集(包含国表里可使用平台、使用教程、参数教程、部署教程、业界新闻等等) stable diffusion tutorial、disco diffusion tutorial、 AI Platform (github.com) ==可以的
[*]awesome-stable-diffusion/awesome-stable-diffusion: Curated list of awesome resources for the Stable Diffusion AI Model. (github.com)
[*]Stability-AI/stablediffusion: High-Resolution Image Synthesis with Latent Diffusion Models (github.com) sd2版本
[*]cmdr2/stable-diffusion-ui: Easiest 1-click way to install and use Stable Diffusion on your own computer. Provides a browser UI for generating images from text prompts and images. Just enter your text prompt, and see the generated image. (github.com) 桌面端UI
[*]gradio-app/gradio: Create UIs for your machine learning model in Python in 3 minutes (github.com)
[*]摄影师危!AI绘画即将降维冲击摄影行业 - 知乎 (zhihu.com)
[*]ControlNet正在补完AIGC工业化的最后一块拼图 - 知乎 (zhihu.com)
[*](15条动静) 【AI绘画】全部模型种类总结 / 使用方式 / 简易训练指导——魔导绪论_栗少的博客-CSDN博客 ==挺好,有对名词做解释,概念入门
[*]note.youdao.com/ynoteshare/… ==教程-使用-思路-扩展,但依赖谷歌
[*]Stable Diffusion 完美复制Korean doll likeness!(详细版,持续更新中!) - 知乎 (zhihu.com)
[*]如何使用stable diffusion批量为“虚拟女友”换衣服 - 知乎 (zhihu.com)
[*]AI技术“造人”:如何使用stable diffusion为你批量打造斑斓的“虚拟女友” - 知乎 (zhihu.com)
[*]StableDiffusion模型资源探索食用指南 - 知乎 (zhihu.com) ==质量很高,总结的很好
在线体验(麻瓜)


[*]Stable Diffusion 2-1 - a Hugging Face Space by stabilityai sd2版本的试用环境
[*]andreasjansson/stable-diffusion-animation – Run with an API on Replicate ==可以输出动画和gif,挺有趣
[*]无界AI-人人都是艺术家 (wujieai.com) ==国内的,已注册手机号
<hr/>
最后的最后

想要交流,请教问题,炫耀作品,创业脑洞分享,膜拜大神,请加青柠小姐姐V进群:LQN13149999

happy hacking~~~
页: [1]
查看完整版本: 喂饭级stable_diffusion_webUI调参权威指南