Light-Field-camera-光场相机原理精讲.ppt

光场相机原理 田勇志 背景知识-艾里斑 背景知识-景深 光圈 快门 传统成像的缺点 光场理论的发展 获取光场手段 相机组成 光场四维函数 传统相机 非焦平面成像 光场记录 光场记录-原始光场图像 光场记录-子孔径图像 计算成像公式 数字重聚焦1 数字重聚焦2 数字重聚焦3 聚焦结果 分辨率 空间分辨率和方向分辨率 最大分辨率 基于光场合成光场技术 基于光场合成光场技术 基于光场的显微成像 总结 * 中科院安徽光学精密机械研究所 中科院环境光学重点实验室 2009级博士中期报告 中科院环境光学重点实验室 如果此圆形足够小，肉眼依然可被视为 点的成像。这个可以被接受的最大直径 被称为容许弥散圆直径δ 瑞利判据：当一个艾里斑的边缘正好与另一个艾 里斑中心重合时，这两个艾里斑刚好能被区分开。 d为像素尺寸 D为光圈直径 在对焦时，通过镜头将在焦平面上清晰成像，而对焦点的前景和后景也在 焦平面成像，只要它们成像的弥散圆等于或小于容许弥散圆直径，我们将 认为是清晰的，这样影像就有一个的清晰的区间，这就是景深 (1)、镜头光圈：光圈越大，景深越小；光圈越小，景深越大； (2)、镜头焦距：镜头焦距越长，景深越小；焦距越短，景深越大； (3)、拍摄距离：距离越远，景深越大；距离越近，景深越小。 光圈越大(F值越小),通过的光亮越多，景深越小， 突出主体，要求对焦准确 快门越快，进来的光亮就越少，快门越慢就进光更多 传统相机，获取大的景深，需要减小光圈，那么每次曝光进入的光子数有限，信噪比降低，出现噪点 高速物体，需要提高快门，为了平衡信噪比，需要大光圈，景深小，对焦难，背景模糊 黑暗的环境，为了平衡信噪比，需要延长曝光时间，手的抖动造成图像模糊，需要三脚架 1936年，Gershun提出光场概念，光场就是光辐射在空间各个位置各个方向的传播 1992年，Adelson将光场理论应用到计算机视觉，提出全光场提论（plenoptic theory） 1996年，Levoy提出光场渲染理论（light field rendering），将光场进行参数化，并提出了成像公式 2005年，Ng发明第一台手持式光场相机 2006年，Levoy研制出光场显微镜 1.微透镜阵列 普通成像技术的一次像面处加入一个微透镜阵列，每个微透镜记录的 光线对应相同位置不同视角的场景图像。 2.相机阵列 它是指通过相机在空间的一定排布来同时抓取一系列视角略有差别的图像， 从而重新勾出光场数据的方法。 3.掩膜及其他 共同点都是对相机的孔径做相应处理 光场相机包换一个主镜头，一个微透镜阵列和一个数字图像传感器 根据Levoy的光场渲染理论，空间中携带强度和方向信息的任意光线，都可以用2个平行的平面参数化表示，光线与两个平面相交于两点，形成四维函数L(u,v,x,y) 所有圆锥光线叠加形成图像一个像素值 对于每一个空间的像素X，u的变化都覆盖了全镜头 保留了空间分辨率x，但没有记录方向值u 不同距离的景物成像，但我们固定一个x成像平面 当焦点远于x成像面，那么斜率为正 当焦点近于x成像面，那么斜率为负 X的变化是随u的变化成线性的变化的 光场相机的一次采样过程 图中网格列的宽度是微透镜的宽度 收集方向分辨率导致最后图像分辨率降低，最大的分辨率为微透镜的个数 灰色的图像传感器像元加起来，我们就可以计算出 在光学焦平面图像中的微镜头尺度大小像元的值 原始图像是由一系列斑点构成，每个 斑点都是微透镜的成像，圆的图像是 因为主镜头是圆的 原始光场成像是一个（x,y）成像网格，每副图像表明到达成像面某个微透镜的光线来自主镜头不同的（u,v）位置 因为孔径是有限的，所以每个微透镜都有一定的视场，不同微透镜之间有一定的视差 视差就是从有一定距离的两个点上 观察同一个目标所产生的方向差异 经典的辐射理论表面，在像平面上的一点的辐射来 自于镜头上所有辐射的权重积分 是距离目标平面外F距离的光场参数 cosΘ是由于光学渐晕效应的衰减因子 把（x,y,u,v) (X’,y’,u,v) 那么我们可以得到任意平面上的点成像函数 傅里叶切片定理 傅里叶切片定理的含义是平行投影的一维傅里叶变换等同于原始物体的二维傅里叶变换的一个切片。 将已知投影数据通过一个简单的二维物理也反变换可以得到物体界面的一个估计。 投影定义 平面（x’,y’) 傅里叶切片定理 空间域和频率转换关系 镜头 衍射 提高锐度 方法：让微透镜在主镜头的焦面上 聚焦就是微透镜和图像传感器间距为焦距 扩大微透镜直径 希望每个微镜头下包