SD web UI x ControlNet:全新預處理器 Reference-Only 無須模型可讓 SD 參考指定影像生圖
2023/05/14
萌芽站長
4,670 1
軟體應用 , 人工智慧 , AI繪圖
ControlNet , Stable Diffusion web UI
⚠️ 溫馨提醒:我們發現您可能啟用了廣告阻擋器,請將本站加入白名單以正常閱讀文章內容,謝謝支持 ❤️
SD web UI 全稱 Stable Diffusion web UI,是本次要搭配使用 ControlNet 的 AI 繪圖工具。Reference-Only 是不需要任何控制模型的預處理器,ControlNet 1.1.153 後的版本才能使用,它能直接使用影像作為參考來引導擴散。根據開發者的說明,這個方法與基於修補的參考方法類似,但不會使影像變得雜亂無章,這個 ControlNet 可以直接連接您的 SD 的注意力層到任何獨立影像,這樣您的 SD 就可以讀取任何影像作為參考。實際用起來,對於光線、顏色的參考效果非常明顯,幾乎可以說不用 LoRA 訓練就能極為接近輸入 ControlNet 影像的樣子,只要提點一些重點提詞(不要有顏色相關的提詞),就能生出相當接近原始角色不同動作、表情的影像,當然如果能搭配 LoRA 肯定更加完美。這次的參數及示範供大家參考,相信能有更多意想不到的運用,歡迎大家到萌芽論壇分享您的成果。

▲ 更新完 ControlNet 後,預處理器可以選擇最新的 reference-only,無須選擇模型,只需要輸入一張影像,接著我把控制權重調到 2,並以 ControlNet 更重要來作為控制模式。
實際生成結果
統一使用以下參數進行生成 ▼
提詞:1girl, solo, closed eyes, smile, (chibi:1.2), __posture__
__posture__:standing\nstanding\n(contrapposto:1.1)\n(contrapposto:1.2)\n(sitting:1.1)\n(sitting:1.2)
參數:Steps: 80, Sampler: UniPC, CFG scale: 7, Size: 512x768
我提詞故意用的非常少,就想看看它能參考輸入影像到什麼程度。基本上就是希望不載入 LoRA 的情況下,直接讓其閉眼跟更加 Q 版,姿勢讓它隨機,來看看結果如何吧!
一、喜多郁代
左圖參數及 LoRA 來自萌芽二次元,右圖是以 Reference-Only 搭配新的參數生成的。

二、櫻井桃華
左圖參數及 LoRA 來自萌芽二次元,右圖是以 Reference-Only 搭配新的參數生成的。

本文到此結束,希望有幫助到大家。
贊助廣告 ‧ Sponsor advertisements
Kalidoface 3D:網頁運行的 VTuber 虛擬人物!支援全身或臉部追蹤!本地執行完整教學
📆 2023-05-21
📁
軟體應用, 網路應用
Cartoonizer:漫畫化您的世界!運用 AI 轉換影像與短片成漫畫風格!
📆 2020-08-14
📁
多媒體, 網路應用, 人工智慧, 靜圖處理
Telegram Desktop 1.4 更新:重新設計的設定介面、改善圖像的本地緩存
📆 2018-09-29
📁
軟體應用, 資訊新聞
SD web UI x Better Prompt:透過獨立 UI 協助輸入和編輯提示詞
📆 2023-04-24
📁
軟體應用, 人工智慧, AI繪圖
ComfyUI x Qwen-Image-Edit:二次元角色髮色瞳色一鍵輕鬆更換教學(應用篇)
📆 2025-09-10
📁
軟體應用, 多媒體, 人工智慧, AI繪圖, 靜圖處理
Telegram 8.4.1 for Android & Telegram Desktop 3.4 更新:回饋、劇透、翻譯和 QR Code
📆 2021-12-30
📁
軟體應用, 行動平台, 資訊新聞, APP應用, Android
Telegram 5.8 for Android & Telegram Desktop 1.7.9 更新:基於位置的聊天、添加沒有電話號碼的聯...
📆 2019-06-24
📁
軟體應用, 行動平台, 資訊新聞, APP應用, Android
Telegram 9.4 for Android & Telegram Desktop 4.6 更新:大頭照製作工具、翻譯整個對話、表情符號...
📆 2023-02-06
📁
軟體應用, 行動平台, 資訊新聞, APP應用, Android
留言區 / Comments
萌芽論壇