计算摄像学专题第3讲.ppt

4D反射场 2D 光照具有可加性 重光照 2D 图像 2D + 光照 2D 重光照：根据对象在一个或多个光照下的外观，就算目标光照下的对象外观 Light Stage [Debevec2000] Light Stage 采集图像 Original Resolution: 64?32 反射函数 64?32 反射函数 环境光照图 反射函数 光照积 绘制像素 1 Demo The Light Stage:60-second exposure 反射场 远距离环境光照 反射场 有近距离遮挡物，该重光照框架是否成立？ Light Stage 单视角多光照 只适用于远距离光照 框架假设物体上每个点具有相同的环境光照图 近距离光照或遮挡物使得 每个物体点的环境光照图不一 需要维度更高的反射场函数及其图形学方法 8D反射场 8D 反射场函数 8D反射场处理互遮挡的重光照问题 反射场 8D 反射场函数 [Masselus2003] 6D反射场 6D 图像 2D + 视角 2D + 光照 2D 光场 — 采集与应用 Spherical gantry [Levoy96] 相机自由度：2 光照自由度：2 360度的光场及反射场 捕获 应用：文物记录与保护 多视点多光照采集 对静态对象, 数据维度—6D [Matusik2002] 多视点多光照采集 Visual Hull Surface Lightfield Surface Reflectance Fields Alpha Mattes 多视点多光照采集 Visual Hull Surface Lightfield Surface Reflectance Fields Alpha Mattes 多视点多光照采集 总结 全光函数是空间光线的集合 光场是全光函数的4D参数化与简化 光场可实现虚拟视角的实时绘制 光场采样定律：深度与采样率的折中 光场的应用：光场相机与光场显微镜 光场的扩展：场景重光照 * 光场显微镜利用和光场相机类似的原理对4D光场进行捕捉，并接着向下做：4D light field → digital refocusing → 3D focal stack → deconvolution microscopy →3D volume data，利用得到的3D volume Data可以在一定条件下对观察对象进行3D渲染，实现一定视角范围内的立体成像。 光场显微镜的优势：captures 3D structure of microscopic objects in a single snapshot, and at a single instant in time基于refocus原理，大大扩展了观测的深度；可以进行透视（perspective）视角的观察；可以进行3D重构（表面视角）；由于可以从单幅拍摄图像中进行3D重构，因此，LFM可以用来实时观察活动物体。光场显微镜的不足：大大牺牲了空间分辨率来换取focal depth光学显微镜本身受衍射限制只能观测透明性的、薄的物体 为了看到每个切片薄层 原来的做法是要调节载物台 使得聚焦到各个不同的切片层 现在用了这个光场显微镜就可以计算聚焦 * 采样率分析 3个深度层，32Х32 图像集，过采样 采样率分析 3个深度层，16Х16 图像集，采样 采样率分析 3个深度层，8Х8 图像集，最优采样 采样率分析 3个深度层，4Х4 图像集，欠采样 采样率分析 3个深度层，2Х2 图像集，欠采样 采样率分析 几何信息与采样率的折中，由最小采样曲线决定 目标图像的分辨率影响最小采样曲线的偏移 光场 — 采集与应用 Spherical gantry [Levoy96] 相机自由度：2 光照自由度：2 360度的光场及反射场 捕获 应用：文物记录与保护 光场 — 采集与应用 多相机阵列 128相机系统 (Stanford’05) 64相机系统(Tsinghua’07) 应用 动态光场捕获 虚拟光圈成像 时空高分辨率插值 HDR光场成像 光场 — 采集与应用 光场 — 采集与应用 全光函数 plenoptic (拉丁 plenus: full，optic: vision) plenoptic function [Adelson 91] 空间中的某个位置(3D) 沿着某个方向(2D) 在某个具体的时间(1D) 具有某个波长(1D) 为7维函数 涵盖动态场景中的任意光线集 光场