ControlNet作者“敏神”（張呂敏），剛剛上新了一個(gè)新項(xiàng)目——

名叫IC-Light V2，可以說(shuō)是把AI打光這事兒玩得溜溜的。

圖片

IC-Light是此前張呂敏開(kāi)發(fā)的圖像處理工具，可以通過(guò)AI技術(shù)精確控制圖像中的光照效果。

而此次的V2版本則是一系列基于FLUX的IC-Light型號(hào)，具有16通道VAE和原生高分辨率。

話(huà)不多說(shuō)，直接來(lái)看效果。

例如隨意輸入一張照片，附上一句Prompt：

flicker 2008 photo of a woman, neon light, city, cars and people in the background.
閃爍2008年的照片，一個(gè)女人，霓虹燈，城市，汽車(chē)和人的背景。

圖片

最終生成的效果可以稱(chēng)得上毫無(wú)違和感。

我們?cè)賮?lái)放大來(lái)看下前后的對(duì)比，人物細(xì)節(jié)保留程度就更明顯了：

圖片

再來(lái)看一個(gè)例子：

圖片

據(jù)敏神自己介紹：

IC-Light V2得益于更好的訓(xùn)練方法，細(xì)節(jié)保留能力遠(yuǎn)高于SD1.5。

而網(wǎng)友們?cè)诳赐晷鹿ぞ叩男Ч笠仓焙簟笆澜缟献詈玫闹毓庹眨╮elighting）工具”。

圖片

風(fēng)格化圖片也能處理

在之前基于SD1.5的IC-Light，有個(gè)問(wèn)題就是處理帶風(fēng)格的圖片的效果并不是非常理想。

例如這樣：

圖片

可以明顯看出，原圖是一張美漫風(fēng)格的圖片，而輸出的結(jié)果卻是真人風(fēng)了。

而且即使在Prompt中給到了關(guān)鍵詞“surrealist painting of（超現(xiàn)實(shí)主義繪畫(huà)）”，得到的風(fēng)格依舊還是帶點(diǎn)漫畫(huà)風(fēng)。

嗯，AI直接把這個(gè)關(guān)鍵詞給忽略掉了。

圖片

而現(xiàn)在，基于FLUX的IC-Light V2，已經(jīng)彌補(bǔ)了此前的缺陷。

圖片

圖片

圖片

除了人物之外，敏神也展示了其它主體的效果。

圖片

圖片

在線(xiàn)可玩

目前，IC-Light V2已經(jīng)上線(xiàn)HuggingFace，可以在線(xiàn)體驗(yàn)。

下面是我們實(shí)測(cè)馬斯克照片的例子：

圖片

除此之外，敏神此次推出的IC-Light V2其實(shí)是一個(gè)系列的模型。

目前可以體驗(yàn)的版本是一個(gè)foreground conditioned model（前景條件模型），強(qiáng)調(diào)的是保留輸入圖像細(xì)節(jié)。

還有三個(gè)模型在陸續(xù)發(fā)布：

• 還是一個(gè)前景條件模型，但強(qiáng)調(diào)支持較大的修改，例如處理低光圖像和更改硬陰影。
• 一個(gè)前景和背景條件模型
• 與環(huán)境HDRI集成的模型

最后，敏神對(duì)于這次的模型還補(bǔ)充道：

目前的模型只能在Huggin

gFace上體驗(yàn)，稍后會(huì)發(fā)布更多的推理代碼和權(quán)重。

然而，與V1不同的是，該許可證將僅用于非商業(yè)用途。

體驗(yàn)鏈接放下面了，感興趣的小伙伴可以嘗鮮一波哦~

體驗(yàn)地址：https://huggingface.co/spaces/lllyasviel/iclight-v2

參考鏈接：
[1]https://github.com/lllyasviel/IC-Light/discussions/98[2]https://x.com/multimodalart/status/1850521222213218380?s=46&t=6eepxw1G6XRQ7VO0ANjJWg