作者jeffguoft (见习生_O7)
看板AI_Art
标题[讨论] 请问lora标签是如何影响文本整体的呢?
时间Sun Mar 19 13:13:00 2023
lora有包含两个标签
一个是触发的tag跟lora的<>标签
想请教一下这两种类型会怎麽影响prompt整体呢?
假设有一个娜娜奇lora
<lora:nanachi:1>
然後有tags: nanachihat nanachipants 娜娜奇的帽子跟裤子等等
1. 当提示词文本跑到<lora:nanachi:1>这一行时,是连带加强所有娜娜奇相关的tags吗
,即使我在prompt内没写入任何娜娜奇tags?
2. 要是我没写入<lora:nanachi:1>,单独运行娜娜奇的tags(nanachihat)会有任何效果
吗?
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 49.159.248.225 (台湾)
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/AI_Art/M.1679202783.A.6CD.html
1F:推 wres666: <lora:>不是prompt 这只是让webui载入lora 03/19 18:52
2F:推 shellpig: 不过lora标签後面的百分比的确影响画风不少,我跟 03/19 19:24
3F:→ shellpig: 原po其实有一样 03/19 19:24
4F:→ shellpig: 问题 03/19 19:24
没错,虽然大部分人的解释是载入lora
但是<lora:>加入後,可以不用任何tag就显现lora的特徵
---
我好像想明白了,做训练时的图档文本都会包含很多关键字
比如1girl solo 或者是例子中更直接的nanachi
<lora:>一加入,连1girl跟solo也会被影响到
应该是这样
不过我第二个问题还是有疑问,因为我有测试没载入lora直接加tag
结果有显现很弱的特徵,不知道是不是模型从一开始就有了还是怎样
5F:→ trywish: lora里面太杂的关系?我不加关键字,跑出照片、风景画等 03/19 19:55
6F:→ trywish: ,不过如果加了1girl关键字,就会慢慢靠向lora。甚至还把 03/19 19:56
7F:→ trywish: 权重加到1.2,脸型吻合机率变高。 03/19 19:56
※ 编辑: jeffguoft (49.159.248.225 台湾), 03/19/2023 20:05:25
8F:推 Vulpix: 有些会有,像是D站应该有娜娜奇tag。我之前试过山本武, 03/19 20:36
9F:→ Vulpix: 产图会偏向俐落短发,但很难叫出山本武本人。 03/19 20:36
10F:推 yeeouo: 如果是初音之类的 最热门那种 就很容易叫出本人 03/20 01:09
11F:→ strangegamma: 所谓乾净的lora会是怎麽样的训练法啊?有点好奇。 03/21 18:49
12F:→ trywish: 尽量图不要太杂吧,我刚测了几次,虽然样本不大,不过好 03/21 20:53
13F:→ trywish: 像能抓点趋势。我丢了10张背心训练,关键字只有A+少量cat 03/21 20:53
14F:→ trywish: 如果只是单纯加lora:1,跑偏机率略高,打关键字,有降一 03/21 20:54
15F:→ trywish: 点,然後cat这关键字触发猫的次数没有。後来我多丢一张女 03/21 20:55
16F:→ trywish: 性穿背心照片进去,不管打A或cat,甚至不打。背心机率提 03/21 20:56
17F:→ trywish: 高到几乎都有特徵(几乎没有粗肩带),猫只出现一次。之後 03/21 20:56
18F:→ trywish: 把1girl改1man,T-shirt和打赤膊出现次数变高,偶尔产出 03/21 20:58
19F:→ trywish: 女性是背心。 03/21 20:58
20F:→ trywish: 所以给的图片越杂,产图时候就可能因为关键字和lora某个 03/21 20:59
21F:→ trywish: 图片结合,产出具有lora特徵的图片。也不用提示,只要图 03/21 20:59
22F:→ trywish: 片里面是女性穿背心,就算关键字是A和猫,但产出女性的时 03/21 21:00
23F:→ trywish: 後就很容易变背心。男性机率就没那麽高。 03/21 21:00
24F:→ trywish: 我看了一下别人写的训练。首先1.最前面放keep_tokens,这 03/22 03:19
25F:→ trywish: 应该没问题。 03/22 03:19
26F:→ trywish: 2.有些人建议删除或“修剪”您的角色或概念固有的标签, 03/22 03:19
27F:→ trywish: 例如头发颜色和眼睛颜色。一个角色总是有猫耳朵,您可以 03/22 03:20
28F:→ trywish: 删除 等标签animal ears, animal ear fluff, cat ears。 03/22 03:20
29F:→ trywish: 这样它们就会被您的标签“吸收”,并使您的 Lora 更易於 03/22 03:21
30F:→ trywish: 使用,但灵活性较低。 03/22 03:21
31F:→ trywish: 当然怎训练还是看自己。 03/22 03:23
32F:推 OriginStar: 这2天开始练习使用SD,用上原亚衣LoRA进行测试 04/03 10:35
33F:→ OriginStar: <lora:aiUehara_v10:1>,发现提词有加上Ai Uehara 04/03 10:36
34F:→ OriginStar: 就绘出很上原亚衣,没加上Ai Uehara就绘成金发未成年 04/03 10:37
35F:→ OriginStar: 妹子,所以我猜在训练LoRA前,在预处理时, 04/03 10:38
36F:→ OriginStar: 可以先加上一些关键字看看 04/03 10:38