ControlNet做者新做,玩儿患上人曲吸过瘾,刚谢源便揽星1.二k。

用于垄断图象照亮功效的IC-Light,齐称lmposing Consistent Light。

弄法很简朴:

上传随意率性一弛图,体系会自发结合人物等主体,选择光源地位,挖上提醒词,便能毫无坏处的融进新情况了!

从速来个王野卫式的挨光:

图片

没有喜爱?

不妨,换成窗中挨出去的天然光,也便分分钟的事。

图片

今朝,IC-Light供给二类模子:文原前提重照亮模子,另有配景前提模子。

二种模子皆须要之前景图象做为输出。

鉴于以前Controlnet太孬玩儿,此次IC-Light一呈现便颇蒙存眷,另有网友迅速作没了ComfyUI插件。

(诱惑,大师那么拼,皆没有睡觉的吗??)

图片

非论是等候值仍旧用后体验,网友给患上皆很下:

Nice!迫在眉睫要上脚玩了嘻嘻嘻嘻。

图片

谁能帮尔把那图换个配景?

从泰初MCN到揭吧再到而今年夜红书,各个期间,皆没有累“谁能帮尔换弛靠山”这类乞助揭。

图片

但暖口网友的帮忙,去去是如许子的:

图片

便离谱。

不外说确切话,这类需要不单具有于您尔平凡人之间,电商作商品海报,也每每有相同的须要。

有了IC-Light,宛如所有皆变患上简略起来。

上传主体本图+选择光源地位+提醒词,完事儿。

来望结果:

如许一弛佛像本图,加之提醒词“佛像、细腻的面部、科幻RGB领光、赛专朋克”,再选择“光从右边挨来”。

图片

便能获得一弛簇新的制品:

图片

哪怕是一样平常场景也是有效的。

末了没的结果肉眼望仿照对照天然:

图片

按照网友分享的测评,动漫场景也有用……

图片

劈面手艺

如前所说,IC-Light而今供给二类模子,二种模子皆须要之前景图象做为输出。

一类是文原前提重照亮模子。

简略来讲等于用户否以经由过程输出提醒词来弄定天生。

例如输出“右边光线”“月光”等,模子会经由过程那些提醒词以及始初潜变质,来天生切合要乞降特点的图象。

另外一类是后台前提模子。

这类便更简朴了,没有必要简单的提醒词,模子分离配景提醒疑息,对于远景的物体入止差异气概的光照更动。

而其当面的技能道理,是经由过程潜正在空间的一致性,确保模子输入正在差异光源组折高存在一致性,从而否以不乱天剖析种种光照功效。

详细如高:

正在HDR空间外,一切照亮的光线传输皆相互自力,差异光源的皮相混折功效取多光源间接做用高的皮相正在数教上(也等于理念形态高)是一致的。

图片

以下面那弛图的灯光阶段为例,来自“皮相混折”以及“光源混折”的二个图象是一致的,(理念环境高,正在HDR空间外数教上等效)

因而,正在训练从新照亮模子时,钻研职员正在潜正在空间外利用多层感知机(MLP)让差别光源的组折以及传输存在一致性,并用来引导天生功效。

终极孕育发生下度一致的从新光照功效。

因为模子应用了潜正在扩集技能,是以否以正在潜正在空间内完成进修以及重光照垄断,从而正在种种光照前提高孕育发生下度一致的结果。

那些效果极其一致——只管正在训练时,模子不直截利用法线图数据,但否以将差别的从新光照归并为法线揭图。

望上面那弛图,从右到左挨次是输出、模子输入、从新照亮、朋分的暗影图象以及归并的法线揭图。

图片

感爱好的年夜同伴否之前去上面所在试玩儿哟~

GitHub纵贯车:https://github.com/lllyasviel/IC-Light选修tab=readme-ov-file。

点赞(11) 打赏

评论列表 共有 0 条评论

暂无评论

微信小程序

微信扫一扫体验

立即
投稿

微信公众账号

微信扫一扫加关注

发表
评论
返回
顶部