作者marshall323 (九條可憐真可憐)
看板AI_Art
標題[閒聊] 如何為同一種角色圖增加細節
時間Thu Feb 20 00:36:56 2025
各位大大好
最近我使用niji產出了同一角色的各種圖如下
1.
https://imgur.com/rHjoGfX
2.
https://imgur.com/go7He3w
3.
https://imgur.com/XffEhw3
4.
https://imgur.com/pGN0UgH
目前可在niji裡生成類似的角色圖
但niji無法基於原圖的構圖、色彩、角色一致性來增加細節
例如增加光影、材質紋路、角色與背景更好地結合
甚至能夠在同一種姿勢下讓骨架更流暢
或是基於目前產出的圖，未來能提高角色一致性
畢竟以目前的圖來看，還有一些角色的特徵在細節上會有變化
有嘗試使用stable diffusion的webUI試圖達到上述效果
然而效果非常不佳
也有使用controlnet的一些功能盡可能保留原圖特徵
角色特徵也會有跑掉的問題
也可能是因為我是stable diffusion的新手
所以沒有看到更進一步的方法
想請問大大有沒有關鍵詞或流程可供搜尋
非常感謝大家抽空回答
--
https://imgur.com/UNyiuHH
https://imgur.com/KIfSCms
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 111.184.86.151 (臺灣)
※ 文章網址: https://webptt.com/m.aspx?n=bbs/AI_Art/M.1739983019.A.581.html
1F：推 Supasizeit: 經驗是增加細節一定要resemple 然後圖就很容易變 你 02/20 00:53
2F：→ Supasizeit: 用canny 去圖生圖可以保留輪廓 但顏色什麼的還是會跑 02/20 00:53
3F：→ Supasizeit: 我最近都是用Kohya deep shrink 直接生2K大圖然後Ult 02/20 00:55
4F：→ Supasizeit: imateSDUpscale 02/20 00:55
5F：推 Supasizeit: 至於角色要一致要馬IPAdapter要嘛練Lora 02/20 00:58
6F：→ marshall323: 謝謝大大，我會再基於這幾個關鍵字試看看。 02/20 01:16
7F：→ marshall323: 想再請教一下，checkpoint的影響是否是最大的， 02/20 01:17
8F：→ marshall323: 因為我不管試多少有相似畫風+細節化的lora都會畫出蠻 02/20 01:17
9F：→ marshall323: 奇怪的結果，例如角色衣服大變， 02/20 01:17
10F：→ marshall323: 所以必須在圖生圖裡把圖片的權重調特別高， 02/20 01:17
11F：→ marshall323: 不確定這個認知是不是對的，謝謝。 02/20 01:17
12F：推 Supasizeit: 你是不是用跟ckpt 不匹配的Lora 02/20 02:20
13F：推 kdjf: 圖要像，權重當然要高啊。用少step少noise多洗幾次可能比一 02/20 07:50
14F：→ kdjf: 次到位容易 02/20 07:50
15F：→ kdjf: 要增加細節需要靠upscale，SD訓練的模式造成細節量跟像素量 02/20 07:50
16F：→ kdjf: 正相關，你upscale完再用傳統影像處理縮小圖面才能產生高密 02/20 07:50
17F：→ kdjf: 度的細節 02/20 07:50
18F：→ marshall323: 回覆s大：匹配是指lora的基礎模型的話，我是照civila 02/20 12:57
19F：→ marshall323: i提供的基礎模型資訊做對應的，不確定還有什麼要注意 02/20 12:57
20F：→ marshall323: 的，這可能要再請教了 02/20 12:57
21F：→ marshall323: 回覆k大：了解了，原來SD的細節控制和像素量有關，這 02/20 13:09
22F：→ marshall323: 和niji有點不太一樣。想再請教圖生圖的圖片權重比例 02/20 13:09
23F：→ marshall323: 對於比較複雜的upscale流程會不會影響特別大，導致 02/20 13:09
24F：→ marshall323: 圖像細節不佳。目前用一些comfy UI基礎的upscale流程 02/20 13:09
25F：→ marshall323: +一種動漫風格的checkpoint圖片權重太高反而會有細微 02/20 13:09
26F：→ marshall323: 破碎的狀況，蠻容易發生在CFG低於0.3時，圖雖然像但 02/20 13:09
27F：→ marshall323: 沒產生更好的細節。或許我應該重新在SD裡文生圖，會 02/20 13:09
28F：→ marshall323: 比較容易得到想要的效果嗎，這樣可能又要考慮如何與I 02/20 13:09
29F：→ marshall323: PAdapter和controlnet的搭配了。 02/20 13:09
30F：→ marshall323: 如果如同s大所說需要resampling，看來又有需要先解決 02/20 13:21
31F：→ marshall323: 角色一致性問題了，這個我目前沒有想法。resampling 02/20 13:21
32F：→ marshall323: 我比較不要求畫風和原圖很像，只要髮型服裝動作有參 02/20 13:21
33F：→ marshall323: 考到就好，但輸出圖像也要有角色一致性，甚至一致性 02/20 13:21
34F：→ marshall323: 比niji還高，意思有點像是畫風之間的鏡射。至於niji 02/20 13:21
35F：→ marshall323: 裡的upscale，不確定如果在style reference加入一些 02/20 13:21
36F：→ marshall323: 高細節的參考圖像，會不會讓niji去產出高細節的角色 02/20 13:21
37F：→ marshall323: 圖，這個可能要再請教看看了，總之先謝謝大家的回答 02/20 13:21
38F：→ marshall323: 。 02/20 13:21
39F：→ marshall323: 抱歉，我的resampling是指圖片權重低的狀況，圖生圖 02/20 13:23
40F：→ marshall323: 應該也是resampling才對，在此釐清一下。 02/20 13:23
41F：→ AoWsL: 呃...niji調整風格不是只會讓畫風大改而已嗎 SD比較細緻一 02/20 13:50
42F：→ AoWsL: 些 02/20 13:50
43F：→ AoWsL: 單純想靠niji調材質光影細節很難吧 02/20 13:51
44F：→ AoWsL: 我先前稍微試用的感覺調整風格 像是SD直接換大模型而已 02/20 13:56
45F：→ marshall323: 謝謝a大，後來我有在niji試了一下，確實不行，連畫風 02/20 15:42
46F：→ marshall323: 的轉換其實也有點困難度，因為現在的原圖太複雜了 02/20 15:42
47F：→ marshall323: niji太方便了，要生多少角色圖有多少，但就是不能細 02/20 15:44
48F：→ marshall323: 修可惜 02/20 15:44
49F：推 Supasizeit: 我剛剛玩了一下noobai 的ipadapter 蠻爛的 02/20 19:41
50F：推 Supasizeit: 看Reddit 還是建議練Lora 02/20 19:43
51F：→ pikachu2421: ControlNet Tile Resample 02/21 07:47
52F：推 Tosca: 看成為色圖增加細節=.= 02/21 08:37
53F：→ marshall323: 謝謝s大幫忙測試，LoRA這邊看來也要做了 02/21 18:06
54F：→ marshall323: 謝謝p大，之前沒看到這功能，初步看來好像跟我要的 02/21 18:07
55F：→ marshall323: 結果是可行的流程 02/21 18:07
56F：→ marshall323: t大其實也可以這麼說，畢竟都是圖XD，niji甚至可以畫 02/21 18:11
57F：→ marshall323: 出露內褲，然後再被niji判定為色圖 02/21 18:11
58F：推 Vulpix: 細修可以局部生成吧？ 02/21 20:47
59F：→ marshall323: 謝謝v大。不確定v大指的是針對特定範圍繪製嗎 02/23 13:06
60F：→ marshall323: 目前希望的是整張圖的細節都可以修到 02/23 13:07
61F：→ marshall323: 不過大家的方法都還在試當中 02/23 13:08
62F：推 Supasizeit: 最近改用iterative upscale 分階段resample 效果還不 02/27 00:08
63F：→ Supasizeit: 錯 終於全身像可以畫出腳指甲了 02/27 00:08