 Controlnet、SD WebUI Forge 和 LayerDiffusion 的作者 lllyasviel 大神最近又推出了一個(gè)新的項(xiàng)目 IC-Light，可以實(shí)現(xiàn)控制一張圖像的光照方向和色調(diào)氛圍，今天一起我們了解一下它的特點(diǎn)及用法~一 IC-Light 簡(jiǎn)介 IC-Light 項(xiàng)目主頁(yè)： https://github.com/lllyasviel/IC-Light IC-Light 是 'Imposing Consistent Light (營(yíng)造一致的光線(xiàn))' 的縮寫(xiě)，它是一個(gè)照明控制項(xiàng)目，目前支持通過(guò)文本和背景圖對(duì)前景內(nèi)容進(jìn)行照明控制，使前景主體與背景環(huán)境光照一致，從而讓二者融為一體。  從官方放出的截圖中可以看出，IC-Light 可以對(duì)色調(diào)氛圍和光照方向進(jìn)行控制。如提示詞寫(xiě)了 “窗外的陽(yáng)光”，那么處理后的圖像中人物身上就會(huì)有明顯的光影，整體色調(diào)也會(huì)變成溫暖的橘色；如果提示詞寫(xiě)的霓虹燈光，則畫(huà)面會(huì)變成暗調(diào)的紅藍(lán)光。光照方向則可以通過(guò) Lighting Preference 選項(xiàng)來(lái)控制，支持左側(cè)光、右側(cè)光、底部光和頂部光。即使原圖中的光影非常復(fù)雜，IC-Light 也可以重新進(jìn)行打光。   二 使用方法 1. 在線(xiàn)體驗(yàn) https:///spaces/lllyasviel/IC-Light Huggingface 已經(jīng)有了 IC-Light 的在線(xiàn)使用 Demo，可以直接體驗(yàn)其光照控制功能。使用方式也非常簡(jiǎn)單，上傳一張人物圖像，用文本描述新的背景內(nèi)容和色調(diào)氛圍，然后在 Lighting Preference 中設(shè)置光照的方向，最后點(diǎn)擊 Relight 生成就可以了。  2. ComfyUI IC-Light 原生插件： https://github.com/huagetai/ComfyUI-Gaffer 模型下載： https:///lllyasviel/ic-light/tree/main ComfyUI 目前已經(jīng)有多個(gè)實(shí)現(xiàn) IC-Light 的插件，此處我使用的是原生的插件 ComfyUI-Gaffer，我們可以通過(guò) git clone 或者 comfyui manager 安裝。  插件安裝成功后，需要下載 3 種 IC-Light 模型 （文末有資源包），安裝到 ComfyUI/models/iclight 文件夾中，三種模型目前只適用于 SD 1.5 模型，作用分別為： 1.iclight_sd15_fc.safetensors： 默認(rèn)的重照模式，以文本和前景為條件。您可以使用初始潛影來(lái)影響重照效果。在 FG 工作流程中使用它 2.iclight_sd15_fcon.safetensors： 與 “iclight_sd15_fc.safetensors ”相同，但使用偏移噪聲進(jìn)行訓(xùn)練。在 FG 工作流程中使用它 3.iclight_sd15_fbc.safetensors： 以文本、前景和背景為條件的重新照明模型。在 BG 工作流程中使用它  以上步驟完成后，重啟 ComfyUI，然后從 ComfyUI Gaffer 插件根目錄的 example 文件夾中導(dǎo)入官方給的 6 個(gè)工作流文件，然后就可以正常使用了。其中 IC-Light 節(jié)點(diǎn)的相關(guān)參數(shù)和用法在 ComfyUI Gaffer 的 Github 主頁(yè)中有詳細(xì)介紹，使用前可以先仔細(xì)閱讀一下。6 個(gè)工作流的作用分別是： ①workflow-gaffer-iclight-fc-text：文本生成背景，修改給定前景的光照，使其融為一體。  ②workflow-gaffer-iclight-fc：文本生成背景+手動(dòng)設(shè)置 8 種光照方向，修改給定前景的光照，使其融為一體。  ③workflow-gaffer-iclight-fbc：上傳給定背景，修改給定前景的光照，使其融為一體。  ④workflow-gaffer-iclight-fc-normal：批量生成不同的光照環(huán)境。  ⑤workflow-gaffer-iclight-fc-animated：生成動(dòng)態(tài)照明動(dòng)畫(huà) ⑥workflow-gaffer-iclight-all：上傳背景+設(shè)定光照方向+批量生成功能合集 3. SD WebUI Forge 插件鏈接： https://github.com/huchenlei/sd-forge-ic-light 模型下載： https:///huchenlei/IC-Light-ldm/tree/main 除了 ComfyUI，lllyasviel 自研的 SD WebUI Forge 也已經(jīng)有了 IC-Light 的插件，可以在 「extension」中通過(guò)網(wǎng)址安裝。然后下載 clight_sd15_fc_unet_ldm（用于前景）和 iclight_sd15_fbc_unet_ldm（用于背景）兩個(gè)模型，安裝到根目錄的 stable-diffusion-webui-forge/models/unet（沒(méi)有 unet 文件夾手動(dòng)創(chuàng)建一個(gè)）。 SD WebUI Forge 中也支持從文本生成背景、控制照明方向和上傳背景圖對(duì)給定前景造成影響。需要注意的是： 1.如果是自己上傳背景圖，需要將照明模型又 FC 轉(zhuǎn)為 FBC； 2.CFG 數(shù)值要調(diào)低，一般為2； 3.控制光照方向時(shí)，插件為自動(dòng)在圖生圖版塊生成灰度圖，此處的 CFG 同樣要調(diào)整為2，重繪幅度要調(diào)高為1。 以上就是本期對(duì)打光控制插件 IC-Light 的相關(guān)介紹，相關(guān)模型、工作流文件都在下方的云盤(pán)鏈接內(nèi)，記得下載~ 如果你想更全面深入地學(xué)習(xí) Midjourney 并做到靈活應(yīng)用，可以了解一下《AIGC零基礎(chǔ)入門(mén)直播課》這套課程由本平臺(tái)和阿里AIGC人工智能人才孵化中心共同研發(fā)！！！師資力量強(qiáng)大，讓你足不出戶(hù)，零基礎(chǔ)輕松提升設(shè)計(jì)技能，讓我們一起開(kāi)啟設(shè)計(jì)之門(mén)，探索無(wú)限可能！ https://pan.baidu.com/s/1wj4opkQRxYouJTXNy9DvOQ?pwd=6666 密碼：6666 |
|
|
