ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

AIGC动态7个月前发布 QbitAI
847 0 0
ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

 

文章摘要


【关 键 词】 图像处理光照操纵AI技术用户体验商业应用

IC-Light是由ControlNet作者开发的一款图像照明操纵工具,它允许用户通过简单的操作来改变图片中的光照效果。用户只需上传一张图片,系统便能自动识别并分离出图片中的主体,如人物等。随后,用户可以指定光源的位置,并添加提示词,如“王家卫式打光”或“窗外自然光”,系统便能将图片中的光照效果无缝融入新环境。

IC-Light提供了两种模型:文本条件重照明模型和背景条件模型。两种模型都需要以前景图像作为输入。文本条件重照明模型允许用户通过输入提示词来生成所需的光照效果,而背景条件模型则结合背景信息对前景物体进行光照变化。

IC-Light的技术原理是通过潜在空间的一致性,确保模型输出在不同光源组合下具有一致性,从而可以稳定地合成各种光照效果。在HDR空间中,所有照明的光线传输都彼此独立,不同光源的外观混合效果与多光源直接作用下的外观在数学上是一致的。研究人员在潜在空间中使用多层感知机(MLP)让不同光源的组合和传输具有一致性,并用来指导生成效果。

IC-Light的模型使用了潜在扩散技术,可以在潜在空间内实现学习和重光照操作,从而在各种光照条件下产生高度一致的效果。尽管在训练时,模型没有直接使用法线图数据,但可以将不同的重新光照合并为法线贴图。

IC-Light一经开源,便受到了广泛关注,有网友迅速开发了ComfyUI插件,使得操作更加便捷。网友们对IC-Light的评价普遍较高,认为其操作简单且效果自然。IC-Light不仅适用于个人用户,对于电商制作商品海报等商业用途也具有实用价值。

感兴趣的用户可以访问IC-Light的GitHub页面进行试用和了解更多信息。

原文和模型


【原文链接】 阅读原文 [ 1709字 | 7分钟 ]
【原文作者】 量子位
【摘要模型】 moonshot-v1-32k
【摘要评分】 ★★★★☆

© 版权声明

相关文章

暂无评论

暂无评论...