本项目中提出了一种基于半影效果的轻量化光估计策略,该策略是对 DeepLight: light source estimation for augmented reality using deep learning 方案的优化,由于原方法仅对单一主光源方向进行估计,得到的效果并不理想.考虑到软阴影效果是由复数个不同方向的光源照射形成的.笔者将原方法的单一主光源估计改进为了多个平行光方向的估计,并且在此基础上加入了光源色温的概念.

模型使用Blender随机生成的批渲染RGB-D合成数据进行训练,其中图片数据使用了a通道(透明通道)来存放物体到相机的距离(depth信息).为了使合成数据与真实图像效果更接近,在渲染完毕后对图像进行了多项后处理操作.