单镜头景深延拓三维相机.pdfVIP

1 景深延拓的单焦距三维相机 摘 要 在图像探测器前安装一块微透镜阵列可以将普通的相机变成单镜头三维相机，能 够用户在图片拍摄后改变焦距已经观察视角。尽管这种全光相机的概念早在1908年 就被提出，随着近来低廉硬件计算能力和微透镜生产技术的提高，全光相机的应用才 具有可行性。本论文展示了全光相机的细节分析，与此同时介绍了一种新型全光相机， 具有景深延拓以及最大有效分辨率提升至探测器分辨率四分之一的特性。 关键词：全光相机 景深延拓 三维估测 1.引言 全光相机在图像探测器前安装一块微透镜阵列，这种相机在过去的几年里 重新引起了人们对相机设计的兴趣。用全光相机拍摄图像提供了一种全新的方法去观 察图像。这样的图像不是静态的，而能允许用户在图像记录后重构图像。用户能交互 式地改变焦距，观察视角以及场景深度。由于该过程通过计算完成，所以所有效果并 不必对整个图像进行相同的处理，而能分别对每个像元调节。另外原始图像包含计算 场景三维形式的所有信息。也就是说，全光相机实际上就是一种三维相机。 实际上，全光相机最初是由M.G.Lippmann 在1908年设计的，在此之前的19031 年Ives 使用的是针孔而非透镜。这个想法在过去100年内相继由Sokolov(1911),2 3 Ives (1930),Coffey 1935） ,Ivanov(1948),Chutjian(1968),Dudnikov(1970)和 Adelson (1991)进一步改进。Chutjian设计了第一款数字光场记录设备，Adelson第一4 个把此种相机命名为plenopticcamera （全光相机）。最近，这种技术得到了进一步的 发展：Ng （2005）制造了手持全光相机，Levoy （2006）将光场技术应用于显微镜5 6 中，Georgiev 与Lumsdaine (2006)找到了一种提高全光相机空间分辨率的方法，7 8 9 10 Fife (2008)发明了全光CCD探测器。详细历史可以阅读Roberts 的论文。 全光相机获取的原始图像的处理起初在计算机图形学领域的各种文献中缓慢发 展，期望能够用从同一场景不同角度的相机阵列所获得的“光场”信息生成图像。Levoy 2 11 Hanrahan (1996) 将每条光线位置和方向都储存的术语命名为“光场”。后来 12 13 Isaksen (2000)展示了一种利用这样的光场数据重聚焦的算法。在2010年，Raytrix 公司生产了第一款商业全光相机，有效空间分辨率明显提升，能够延拓景深并提供重 聚焦算法。此相机还能够从单次拍摄中进行视角操作和场景深度估计。 从最初的想法到第一款商业产品竟经历了100多年的时间，原因是高质量的微透 镜阵列，高分辨率的探测器以及高速计算能力都未能利用或者太过昂贵，难以生产可 行的高性价比产品。在近10年随着高分辨率的探测器以及高处理能力显卡对于庞大 客户群逐渐成为标准产品，这种情况才得以改变。另一个全光技术迟迟问世的原因是 最初全光相机设计不科学，正如Ng 在2005论文中所展示的例子，该相机生成的重5 聚焦图像的像元数目等于微透镜的数目。也就是说即使利用16百万分辨率的探测器 和40000数目的微透镜阵列，重聚焦图像的分辨率也只有40000，无法满足大多数应 用所需。Georgiev 和 Lumsdaine7,8,14展示了一种以牺牲方向分辨率为代价来提高重 聚焦有效分辨率的方法，即稍微改变微透镜与图像探测器的距离。如此16百万分辨 率的探测器能够最终生成1百万分辨率的图像。另一种提升有效分辨率的方法是利用 基于光学系统点扩散函数知识的超分辨技术。15,16 本论文的主要贡献是深入分析全光相机的光学可行性以及介绍一种多焦距全光 相机。也有其他作者研究全光相机的光学结构。14,16,17本文分析更加细化并推导了高 空间