小小的学习一下stable diffusion记个笔记

一、【AI绘画】一张图看懂新手入门文生图如何使用 – 哔哩哔哩 (bilibili.com)

1.

正面 Tag(想要的内容)是这些,改善画质用的 Tag:

masterpiece, best quality,

通用反面 Tag(不想要的内容)

lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts, signature, watermark, username, blurry

2.

采样步数28合适

3.

提示词相关性“越小AI越自由发挥”

4.

随机种子是 生成过程中所有随机性的源头 每个种子都是一幅不一样的画。默认的 -1 是代表每次都换一个随机种子。由随机种子,生成了随机的噪声图,再交给AI进行画出来

二、【AI绘画】从零开始的AI绘画入门教程——魔法导论 – 哔哩哔哩 (bilibili.com)

偷个懒

Danbooru 标签超市 (novelai.dev)

Stable Diffusion 法术解析 (novelai.dev)

三、产品海报

主体内容

主体

场景

基础设置

打光

构图

色彩

风格细节

风格

细节

镜头

四、图更加专业

photography, masterpiece, best quality,8K, HDR, highres, absurdres:1.2, Kodak portra400, film grain, blurry background, bokeh:1.2, lens flare, (vibrant color:1.2)

nsfw, paintings, sketches, (worst quality:2), (low quality:2), (normal quality:2), lowres

五、万字保姆级教程!Stable Diffusion完整入门指南

万字保姆级教程!Stable Diffusion完整入门指南

六、controlnet

1.启用:表示使用controlnet参与到绘图中

2.预处理:可以选择线稿canny模式,然后预览,就知道线稿是什么样。

2.1canny线稿作图,可以先生成线稿然后再生成图片可以保持原先图片的大量细节

2.2color:先生成马赛克,再根据对应色块生成的新图,色彩位置和原图是相同的。如果要改色,可以把对应的色块p个图,再上传

2.3 直线检测模式mlsd:例如做室内设计有个毛坯房,可以把里面的直线部分提取出来。hough阈值越高细节丢失越高

2.4 分块检测segmentation:用方块表示出了原先的东西,然后又重新绘制

3.invert input color:反转颜色,不一定非要启用

4.RGB转BGR:法线贴图相关功能,预处理中也选择法线贴图

5.底显存:6G以下的可以勾选

6.猜测模式:勾选后就不用填写想要不想要的内容,它会根据提交的图片识别猜测

7.权重:越大会参考上传的这张图片越多,反之反之。一般默认

8.输入输出权重:stable diffusion作图时候是从0%开始作图一直到100%,如果改成0 ,0.5,意思就是从0%到50%都参与到作图中

9.重绘强度越大和原图越不相似,越小越相似

10.局部重绘

11.xy轴采样器:可以用来批量测试,最终生成出根据采样模型、采样方法的表格图、lora。

轴线也可以用表情等tag来表示

七、

embeding类似别人已经做好的人物或景物模型,可以直接生成出对应的角色和风格

VAE:滤镜+微调 ,有的模型自带的

hypernetworks:训练画风,例如像素风,人物做到神似,要一样还是lora

八、

微小世界tag:miniature,lsometric,octane render,

九、提示词

9.1画人物时候的提示词

9.1.1人物及主体特征:服装穿搭;发型发色;五官特点;面部表情;肢体动作

9.1.2场景特征:室内、室外;大场景;小细节

9.1.3环境光照:白天黑夜;特定时段;光环境;天空

9.1.4补充:画幅视角:距离(close-up、distant);人物比例;观察视角(from above,view of back);镜头类型(wide angle Sony A7Ⅲ)

画质提示词:

9.2.1通用高画质

best quality,ultra-detailed,masterpiece,hires,8k

9.2.2特定高分辨率类型

extremely detailed CG untiy 8k wallpaper,unreal engine rendered

画风提示词:

9.3.1插画风:illustration,painting,paintbrush

9.3.2二次元:anime,comic,game CG

9.3.3写实系:photorealistic,realistic,photograph

9.2提示词权重分配

9.3反向提示词

NSFW,(worst quality:2),(low quality:2),(normal quality:2),lowers,normal quality,((monochrome)),((grayscale)),skin spots,acnes,skin blemishes,age spot,(ugly:1.331),(duplicate:1.331),(morbid:1.21),(mutilated:1.21),(tranny:1.331),mutated hands,(poorly drawn hands:1.5),blurry,(bad anatomy:1.21),(bad proportions:1.331),extra limbs,(disfigured:1.331),(missing arms:1.331),(extra legs:1.331),(fused fingers:1.61051),(too many fingers:1.61051),(unclear eyes:1.331),lowers,bad hands, missing fingers, extra digit, bad hands, missing fingers,(((extra arms and legs))),

2023年6月9日