这篇主要是介绍一下SD WEB UI里面一个好用的extension: DAAM Script 相信如果是有学过机器学习的人 应该对Saliency map不陌生 许多Paper分析Model不同Layer对Input的Attention时很常使用这个 而DAAM主要就是实现Stable diffusion中的Saliency map这项功能 ----- 1. 安装及使用 https://i.imgur.com/Lao89PH.png 在这里 用官方的应该就有了 直接点Load from https://i.imgur.com/5MbS0Uc.png 底下可以找到这个Install就好 以T2I为例 https://i.imgur.com/rxSikDX.png 在T2I底下找Script就可以用了 输入想要显示Saliency map的关键字就好 不受(XXX:0.3) [OOO::0.05]这种格式影响 直接打XXX或OOO就可以 也可以打句子中的某一个字也行 输入到没有的会直接给你一个空白的 缺点是不能输入自订的Embedding 她会找不到 ----- 2. 范例 以以下Prompt为例 (watercolor style:1.4), (1 full body girl:0.3), medium breasts girl standing, light [grey|brown] long hair, orange devil eyes, tight (black:1.5) (long:1.4) (sleeveless ao dai:1.2), close mouth, Bare thigh, sheer,midriff, (delicate beautiful detailed hands:0.8) https://i.imgur.com/LCzEZ0D.png 出来结果如下 https://i.imgur.com/naynsKj.jpg 可以发现其中像是delicate beautiful detailed hands关注的地方根本不是手 还有close mouth会影响到其他部位等等 而接下来 如果追加了一些关键字 (watercolor style:1.4), (1 full body girl:0.3), medium breasts girl standing, light [grey|brown] long hair, orange devil eyes,empty eyes, black gloves with (beautiful detailed filigree:1.2), black hair scrunchie, blush, tight (black:1.5) (long:1.4) (sleeveless ao dai:1.2), close mouth, Bare thigh, sheer,midriff, (delicate beautiful detailed hands:0.8) https://i.imgur.com/vQsmsuj.png 热度图如下 https://i.imgur.com/9GJAxKV.jpg 可以发现 Empty eyes 根本没做事 delicate beautiful detailed hands 主要影响的反而是头 blush有好好的作用在脸上 但同时也会影响大腿 --------- 3. 使用心得 虽然看到这边应该都已经知道这个功能实用性了 不过还是讲一下自己主要用这个的用途 最大功能是避免自己下的Prompt造成不预期的影响 像我有一次产64张图 其中大概有5X张多了一双手 虽然用这例子讲比较好但是这例子不能贴 :) 那这很明显就代表有某个Prompt造成了这件事情 用这功能检查後发现Empty Eyes在多的那双手的部分数值很高 最後把Empty Eyes移掉之後就发现64张大概只会有6张多了手 再来就 可以确定你下的关键字是有效的 例如上面范例Blush有正确作用在脸上 可是有过几次经验 当然图也是不能贴的 :) 检查後发现Blush会只作用在其他部位 这时候就需要改成Blush on face 才能够得到正确的结果 ---- 祝大家都能顺利产出自己喜欢的图 之後预计会分享个应用Prompt editing的构图心得与使用 然後顺便问一下 Prompt Matrix有没有办法控制XY轴的东西? 我不管怎麽用都是直接跑出全部的组合 没办法控制一部分在X 一部分在Y ---- https://pixiv.cat/104337774-1.jpg --

※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 36.231.100.249 (台湾) ※ 文章网址: https://webptt.com/cn.aspx?n=bbs/AI_Art/M.1673365047.A.5FB.html