iT邦幫忙

2024 iThome 鐵人賽

DAY 17
0
AI/ ML & Data

AI 學習紀錄系列 第 17

Day 17: Comfyui 測試6

  • 分享至 

  • xImage
  •  

接著測試 StableCascade 的圖生圖。
這次不需要 StableCascade_EmptyLatentImage,可以刪掉。
加入 Load Image、StableCascade_StageC_VAEEncode 這兩個 node。
然後 Load Image 連到 StableCascade_StageC_VAEEncode,StableCascade_StageC_VAEEncode 的 vae 用 stable_cascade_stage_c 的,輸出就跟 StableCascade_EmptyLatentImage 一樣。
Prompt 只寫了 A Cow boy。
流程參考下圖。
https://ithelp.ithome.com.tw/upload/images/20240901/20168318kkaYipNULP.png

然後得到這麼一張帥氣牛仔大頭照,甚至有點糊,完全不對啊。
https://ithelp.ithome.com.tw/upload/images/20240901/20168318BYMxPIqV6b.png

所以又翻了翻別人怎麼做,發現可以這麼處理。
接下來,基於上篇文生圖下去改。

  • 一樣加一個 Load Image。
  • 把 stable_cascade_stage_c 的 Load Checkpoint 換掉,換成 unCLIPCheckpointLoader 這個新 node。
  • StableCascade_EmptyLatentImage 保留著,加入兩個新東西,unCLIPConditioning、CLIP Vision Encode
  • CLIP Vision Encode 的 image 與 Load Image 的 IMAGE 連接。
  • CLIP Vision Encode 的 clip_vision 與 unCLIPCheckpointLoader 的 CLIP_VISION 連接。
  • 原本 positive prompt 直接連到第一個 KSampler,現在改成先連到 unCLIPConditioning 的 conditioning,再由 unCLIPConditioning 的 CONDITIONING 連到 KSampler 的 positive prompt。
  • unCLIPConditioning 的 clip_vision_output 與 CLIP Vision Encode 的 CLIP_VISION_OUTPUT 連接。
    https://ithelp.ithome.com.tw/upload/images/20240901/20168318XlvQRN5nUN.png

還是一樣有個奇怪的紋理,但是很明顯的是基於原圖去生成的。
https://ithelp.ithome.com.tw/upload/images/20240902/201683184E0elbFTuI.png

他還有一個混和兩張圖的用法,流程參考下圖。
接下來會用上面圖生圖的流程去改。

  • 這次需要兩個 Load Image、CLIP Vision Encode、unCLIPConditioning,把它們各複製一個出來。
  • 第二個 CLIP Vision Encode 的 input 接法跟第一個一樣。
  • 原先第一個 unCLIPConditioning 的輸出會接到第一個 KSampler,現在改接到第二個 unCLIPConditioning 的 conditioning。
  • 第二個 unCLIPConditioning 的 clip_vision_output 與第二個 CLIP Vision Encode 的 CLIP_VISION_OUTPUT 連接。
  • 第二個 unCLIPConditioning 的 CONDITIONING 連到第一個 KSampler。
    其他都一樣。
    https://ithelp.ithome.com.tw/upload/images/20240902/20168318xcNUDXPGoh.png

紋理還是一樣奇怪,但色調、背景都被第一張圖的叢林太空人影響,算是融合個很成功吧。
https://ithelp.ithome.com.tw/upload/images/20240902/20168318xSAZfvckm7.png


上一篇
Day 16: Comfyui 測試5
下一篇
Day 18: Stable Cascade 架設
系列文
AI 學習紀錄30
圖片
  直播研討會
圖片
{{ item.channelVendor }} {{ item.webinarstarted }} |
{{ formatDate(item.duration) }}
直播中

尚未有邦友留言

立即登入留言