今天,我要介绍的是IC-Light项目,这是一个专注于图像照明控制和光影重构的技术。该项目采用了两种模型:文本条件照明模型和背景条件模型。为了便于使用,我为大家准备了离线部署整合包,只需解压即可快速启用。这些模型都接受前景图像作为输入,并具备以下显著特点:
技术特点
-
光照感知模型:Relightful Harmonization 能够理解和编码背景图像中的光照信息,包括光照方向和阴影,这是传统技术所忽视的。 -
三阶段训练流程:通过光照感知扩散训练、光照表示对齐和照片写实性微调三个阶段,逐步提升模型的性能和输出的逼真度。 -
数据模拟管道:创新性地使用数据模拟技术来生成训练对,增强模型对真实世界图像的泛化能力。 -
无需外部环境贴图:与依赖HDR环境贴图的方法不同,该技术只需要单一的背景图像即可进行光照感知的人像合成
应用场景
-
专业摄影:在专业摄影中,用于替换人像照片的背景,以适应不同的光照条件和场景。 -
创意编辑:在创意图像编辑中,允许艺术家和设计师自由地将人像与各种背景结合,创造出全新的视觉效果。 -
社交媒体:用户可以将自己的肖像与不同背景和光照条件下的图像融合,用于社交媒体分享。
技术优势
-
光照与颜色和谐:IC-Light能够确保前景图像与背景在光照和颜色上达到自然和谐的统一。 -
灵活性高:模型不依赖特定的光照设备或环境,提供了高度的灵活性和适用性。 -
逼真的光照效果:能够生成与背景光照条件相匹配的前景人像,提高合成图像的真实感。 -
高分辨率支持:IC-Light支持高分辨率图像的处理,保证了图像细节的清晰度。 -
良好的泛化性:经过真实世界图像测试,IC-Light展现了优秀的泛化能力,适应于多变的光照和背景条件。
效果示例
在软件界面中,您只需上传一张图片,输入相应的提示词,并选择期望的光照方向(如左侧光源),随即点击生成按钮,即可获得右侧经过光照优化的图像。
下面是不同的提示词+光照方向生成的效果示例
提示词:
beautiful woman, detailed face, warm atmosphere, at home, bedroom
光照方向: 左
提示词:
beautiful woman, detailed face, shadow from window
光照方向: 左
提示词:
beautiful woman, detailed face, sunshine, outdoor, warm atmosphere
光照方向: 右
提示词:
Buddha, detailed face, sci-fi RGB glowing, cyberpunk
光照方向: 左
提示词:
toy, detailed face, shadow from window
光照方向: 底部
提示词:
mysteriou human, warm atmosphere, warm atmosphere, at home, bedroom
光照方向:右
配置要求
WIN
-
Windwos10/11操作系统 -
支持N卡GPU 6G及以上显存
MAC
-
Apple Silicon M系列芯片 -
MacOS 11.0及以上版本
整合包获取
👇🏻👇🏻👇🏻什么?是不是收费的?👇🏻👇🏻👇🏻
关注公众号,发送【光影增强】关键字获取整合包。
如果发了关键词没回复你!记得看下复制的时候是不是把空格给粘贴进去了!