2光场成像研究.ppt

背景知识 全光函数 光场 光场采样 光场的获取 背景知识-景深 光圈—快门 传统成像的缺点 光场理论的发展 全光函数包含7个变量 空间位置(3D) 特定方向(2D) 特定时刻(1D) 特定波长(1D) L=p(x, y, z, θ, φ ,t, λ) 使用全光函数子集的成像方式 传统摄影 全景成像 视频序列 光场成像[Levoy96, Gortler96] (4D sub-set of x, y, z, θ, φ ) 动态光场[Wilburn05] (5D sub-set of x, y, z, θ, φ ,t) 波长通常以RGB形式表述 在实际的成像系统中，辐射限定在有限的范围内 LDR HDR 缺点： 许多场景参数成型建模为时间参数 动态场景 照明变化 光与物质的相互作用 难于编辑 改进 全光照明函数[Wong02] 反射场[Debevec00] 光场(Light field)的概念最早由A. Gershun于1936年提出，用以描述光在三维空间中的福射传输特性。 光场是表示光辐射分布的函数，反映了光波动强度与光波分布位置和传播方向之间的映射关系。 在几何光学中，光场指的就是光线强度在空间中的位置和方向分布，该分布函数可用光线与两个平行平面的交点坐标来进行参数化表征。 光场可用4D函数表示 假设自由空间 光是沿射线常数 L(u,v,s,t)表示光场的一个采样，其中各变量分别表示: L为光线强度 (u,v)和(s,t)分别为光线与两个平面的交点坐标 在四维(u,v,s,t)坐标空间中,一条光线对应光场的一个采样点 采用双平面参数来表征光场的合理性和实用性在于 现实中的大部分成像系统中都可以简化为相互平行的两个平面 比如传统成像系统中的镜头光瞳面和探测器像面 如果用探测器像面中的坐标(x, y)表示光线的分布位置,那么镜头光瞳面坐标(u,v)就反映了光线的传输方向 传统成像系统中，探测器像面上每个点接收来自整个光瞳的光线进行积分，像面(x,y)处的光照度为 其中,(u,v)为镜头出瞳而上的坐标。 传统成像系统所探测到的光场只能反应其强度和位置(x,y)之问的关系,而损失了其(u,v)方向信息 与传统成像不同，光场成像需要利用二维的探测器像面来同时记录光场的四维信息，即二维位置分布和二维传输方向。 为实现这四维信息向二维平面的转换，必须对四维光场进行重新采样和分布。 基于针孔阵列的光场釆样 在传统成像系统的探测器前方距离b处放置一组等间距针孔阵列可实现光场的重采样 从镜头发出的光线经过每个针孔后投影到探测器平面形成一个子图像,子图像中一点此时就对应于镜头光瞳发出的一条光线(即一个光场采样)。 若将每个子图像整体看作一个宏像素,则每个宏像素对应于光场的一个位置采样,而宏像素内的每一点对应于光场在该位置的一个方向采样;所有宏像素共同组成了光场在镜头孔径上每一点和每一个针孔位置的采样。 光场的位置采样分辨率由针孔采样问隔所决定,而光场的方向分辨率则取决于其在镜头孔径上的采样次数,这是由每个宏像素内所包含的像元数所决定的。 探测器上任一点处的光照度可表示为光场经过针孔过滤后的积分: 任一条光线,若其经过三个平面时的交点分别为u,s和x，h定义为镜头孔径经过一个针孔投影到探测器像面上的直径，D为镜头孔径的直径，镜头与针孔阵列之间的距离为a，针孔阵列中相邻针孔的间距为d 在原针孔阵列的位置放置微透镜阵列，微透镜单元孔径大小等于针孔采样间隔d,而微透镜的焦距正是f。 与针孔采样的区别在于,微透镜单元对光场的位置维度采取矩形釆样(或圆形采样,取决于微透镜单元的孔径形状)的方式,不会损失成像系统的光通景。 视角变换 数字对焦与数字变焦 获取光场手段 相机组成 传统相机 VS 光场相机 传统相机 VS 光场相机 传统相机 VS 光场相机 原型光场相机 4000 × 4000 pixels ÷ 292 × 292 lenses = 14 × 14 pixels per lens 机械设计 microlenses float 500μ above sensor focused using 3 precision screws 光场四维函数 传统相机 非焦平面成像 光场记录 光场记录-原始光场图像 光场记录-子孔径图像 计算成像公式 数字重聚焦1 数字重聚焦2 数字重聚焦3 聚焦结果 分辨率 空间分辨率和方向分辨率 最大分辨率 基于光场合成光场技术 基于光场合成光场技术 基于光场的显微成像 总结 所有圆锥光线叠加形成图像一个像素值 对于每一个空间的像素X，u的变化都覆盖了全镜头 保留了空间分辨率x，但没有记录方向值u 不同距离的景物成像，但我们固定一个x成像平面 当焦点远于x成像面，那么斜率为正 当焦点近于x