基于4D光场高质量形状恢复方法研究.pdfVIP

反照率4D光场辅助高质量形状恢复S

1,2111,2

,,,谭铁牛

1自动化模式识别国家2大学工程与学院

抽象的

在过去的十年中，形状重建方法仅限于具有均匀反照率

和受控照明环境的朗伯反射率。在本文中，我们提出了一

种从4D光场恢复高质量形状的方法，该方法可以处理

具有阴影和相互反射的非朗伯和多反照率场景。4D光场

代表从不同方向照射到传感器平面的所有光线，并且光场

图1.我们方法的流程图。输入是来自4D光场的

的深度图对于非朗伯物体具有鲁棒性。具体来说，我们通

RGB‑D图像。通过反照率分析、照明估计和法线细化恢

过消除边缘和色度的阴影和相互反射来估计反照率。然后

复高质量形状(d)。

从反照率和阴影来分析照明环境。最后，通过正常细化精

确恢复高质量的表面几何形状。我们使用合成场景和

通过在普通照明下融合MVS和PS。人。[7]利用

场景评估公共4D光场数据库的有效性和鲁棒性。

Kinect红外(IR)头的线索并优化沿法线方向

的几何形状。哈克等人。[5]使用Kinect红外头

的光度提示恢复高质量形状。同样，韩等人。[6]提出

索引术语——4D光场、形状恢复、反照率估计、法线

了一个在统一反照率假设下进行光照估计和法线优化的

细化

框架，Yu等人。[8]估计照明和正常分析的相对反照

率。Kinect是一种主动3D成像设备，通过在场景上

1。简介

投射均匀的结构照明图案来测量深度。Kinect的深度

图像形状建模是计算机视觉中一项重要但具有性的全局平滑，偏差较小，而光场的深度包含较大偏差。大

任务。随着消费者深度相机的快速发展，使用多视图立多数适用于Kinect的算法不能保证4D光场上的最佳

体（MVS）、光度立体（PS）、阴影形状（SFS）等多性能。

种方法进行高质量3D重建变得实用。不幸的是，从传感

4D光场已广泛应用于数字重聚焦、计算机图形、立

器获取的原始深度图通常会因遮挡、阴影和复杂反射率

体显示等领域。新型光场相机，例如Lytro和Raytrix，

而受到噪声的破坏。大多数重建算法无法实现令人满意

现已在消费市场上上市且价格实惠。与传统相机相比，

的性能，或者仅在原始深度图的某些条件下表现良好。

光场相机能够捕获场景中光线的强度值和方向。等