新闻中心

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

2024-05-11
浏览次数:
返回列表

controlnet作者新作,玩儿得人直呼过瘾,刚开源就揽星1.2k。

用于操纵图像照明效果的IC-Light,全称lmposing Consistent Light。

玩法很简单:

上传意味着系统会自动分离人物等主体,并选择光源位置,填上提示词,就能毫无破绽地融入新环境了!

赶紧来个王家卫式的打光:

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

不喜欢?

没关系,换成窗外打进来的自然光,也就分分钟的事。

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

目前,IC-Light提供两类模型:文本条件重照明模型,还有背景条件模型。

两种模型都需要以前景图像作为输入。

鉴于之前Controlnet太好玩儿,这次IC-Light一出现就颇受关注,还有网友迅速做出了ComfyUI插件。

(疑惑,大家这么拼,都不睡觉的吗??)

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

不管是期待值还是用后体验,网友给得都很高:

Nice!迫不及待要上手玩了嘻嘻嘻嘻。

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

谁能帮我把这图换个背景?

从远古MCN到贴吧再到现在小红书,各个时代,都不乏“谁能帮我换张背景”这种求助贴。

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

但热心网友的帮助,往往是这样子的:

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

就离谱。

不过说实在话,这种需求不仅存在于你我普通人之间,电商做商品海报,也常常有类似的需求。

有了IC-Light,好像一切都变得简单起来。

上传主体原图+选择光源位置+提示词,完事儿。

来看效果:

这样一张佛像原图,加上提示词“佛像、细致的脸部、科幻RGB发光、赛博朋克”,再选择“光从左侧打来”。

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

就能得到一张崭新的成品:

易标AI 易标AI

告别低效手工,迎接AI标书新时代!3分钟智能生成,行业唯一具备查重功能,自动避雷废标项

易标AI 135 查看详情 易标AI

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

哪怕是日常场景也是适用的。

最后出的效果肉眼看还是比较自然:

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

根据网友分享的测评,动漫场景也适用……

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

背后技术

如前所说,IC-Light现在提供两类模型,两种模型都需要以前景图像作为输入。

一类是文本条件重照明模型。

简单来说就是用户可以通过输入提示词来搞定生成。

比如输入“左侧光线”“月光”等,模型会通过这些提示词和初始潜变量,来生成符合要求和特征的图像。

另一类是背景条件模型。

这种就更简单了,不需要复杂的提示词,模型结合背景提示信息,对前景的物体进行不同风格的光照变化。

而其背后的技术原理,是通过潜在空间的一致性,确保模型输出在不同光源组合下具有一致性,从而可以稳定地合成各种光照效果。

具体如下:

在HDR空间中,所有照明的光线传输都彼此独立,不同光源的外观混合效果与多光源直接作用下的外观在数学上(也就是理想状态下)是一致的。

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

以上面这张图的灯光阶段为例,来自“外观混合”和“光源混合”的两个图像是一致的,(理想情况下,在HDR空间中数学上等效)

因此,在训练重新照明模型时,研究人员在潜在空间中使用多层感知机(MLP)让不同光源的组合和传输具有一致性,并用来指导生成效果。

最终产生高度一致的重新光照效果。

由于模型使用了潜在扩散技术,因此可以在潜在空间内实现学习和重光照操作,从而在各种光照条件下产生高度一致的效果。

这些结果非常一致——尽管在训练时,模型没有直接使用法线图数据,但可以将不同的重新光照合并为法线贴图。

看下面这张图,从左到右依次是输入、模型输出、重新照明、分割的阴影图像和合并的法线贴图。

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

感兴趣的小伙伴可以前往下面地址试玩儿哟~

GitHub直通车:https://github.com/lllyasviel/IC-Light?tab=readme-ov-file。

以上就是ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入的详细内容,更多请关注其它相关文章!


# ic-light  # 谁能  # 两种  # 就能  # 开源  # 有一  # 进阶  # 打光  # controlnet  # git  # p照片换背景  # ai  # 省电  # 河南seo外包排行榜  # 浙江网站建设方案php  # 吕梁抖音seo推广公司  # 浙江如何做网络推广营销  # 营销推广方针是指什么呢  # 金堂网站权重优化  # 抖音seo合集标题  # 品牌小红书营销推广方案  # 内黄本地网站建设  # 河北网站建设多少钱  # 如何使用  # 两类 


相关栏目: 【 行业资讯67740 】 【 技术百科0 】 【 网络运营39195


相关推荐: sql isnull函数如何使用  drawing是什么意思  什么是域名解析 域名解析中采用了什么  typescript和nodejs哪个好  单片机学习视频怎么调色  j*a中数组怎么传递  摄像机的power chg是什么意思中文  play的三人称单数和过去式  solidworks打开igs文件看不见要怎么办解决方法  如何更新typescript  win10锁屏壁纸怎么换360锁屏壁纸吗  夸克网盘为什么解析错误  没基础做单片机怎么样  春运抢票最快几天能成功  165开头的是什么电话号码  如何用命令下载服务器网站  element ui是什么  油烟机上的power是什么意思  华为5g手机怎么选择  汽车的type-c接口是什么  什么是typescript  苹果16改进了哪些  混合固态硬盘如何分区  nosql数据库的应用场景有哪些  如何提高固态硬盘速度  typescript书籍哪个好  8800日元等于多少人民币  gs是什么意思  typescript怎么传json  如何弄坏固态硬盘  linux下如何重定位命令  交管12123协议头是什么  苹果16送哪些配件  typescript怎么使用vue  360手机壁纸怎么改  市盈率20a21e是什么意思  awk命令如何对两列加分隔符  折叠屏手机哪个卖得最好  夸克为什么会变小  怎么批量烧写单片机  typescript属性只读如何修改  mac 如何启动命令行模式  如何辨别固态硬盘坏块  linux如何跳回命令行界面  路亚竿上的power是什么意思  春运抢票最好抢什么票啊  手机全功能type-c接口是什么意思  显示器的power是什么意思  区块链的热闹将何去何从?  怎么用win7系统盘重装系统 

搜索