Loading...
机构名称:
¥ 1.0

自然光未校准光度立体 (NaUPS) 减轻了传统未校准光度立体 (UPS) 方法中严格的环境和光线假设。然而,由于内在的不适定性和高维模糊性,解决 NaUPS 仍然是一个悬而未决的问题。现有工作对环境光和物体材质施加了强有力的假设,限制了更一般场景中的有效性。或者,一些方法利用复杂模型的监督学习,但缺乏可解释性,导致估计有偏差。在这项工作中,我们提出了自旋光未校准光度立体 (Spin-UP),这是一种无监督方法,用于解决各种环境光和物体中的 NaUPS。所提出的方法使用一种新颖的设置,在可旋转的平台上捕获物体的图像,通过减少未知数来减轻 NaUPS 的不适定性,并提供可靠的先验来缓解 NaUPS 的模糊性。利用神经逆向渲染和所提出的训练策略,Spin-UP 可以以较低的计算成本恢复复杂自然光下的表面法线、环境光和各向同性反射率。实验表明,Spin-UP 优于其他监督/无监督 NaUPS 方法,并在合成和真实世界数据集上实现了最先进的性能。代码和数据可在 https://github.com/LMozart/CVPR2024-SpinUP 获得。

用于自然光未校准光度立体成像

用于自然光未校准光度立体成像PDF文件第1页

用于自然光未校准光度立体成像PDF文件第2页

用于自然光未校准光度立体成像PDF文件第3页

用于自然光未校准光度立体成像PDF文件第4页

用于自然光未校准光度立体成像PDF文件第5页