2D to 3D视频转换技术综述与创新.docVIP

2D to 3D视频转换技术综述与创新 　　摘要：明确2Dto3D视频转换技术的含义，总结目前常用的4种方法，并指出它们的优缺点；博采4种方法之所长，关注2D图像to3D视频，形成便捷转换新方法，同时介绍创新之处、流程示意图；依次说明准备素材、建模烘焙、录像转换等三大流程。 　　关键词：2Dto3D；视频转换技术；虚拟校园 　　中图分类号：TP319文献标识码：A文章编号：1672-7800（2012）010-0165-03 　　基金项目：上海师范大学旅游学院/上海旅游高等专科学校科研基金（KY2012-B039） 　　作者简介： 　　庄惠阳（1977-），男，硕士，上海旅游高等专科学校助理研究员，研究方向为虚拟现实导游系统、数字视频后期编辑、教育技术学研究方法；陈能（1961-），女，博士，上海师范大学旅游学院教授，研究方向为地图遥感、测量与城市环境、地理信息系统。 　　12Dto3D视频转换技术综述 　　2Dto3D视频转换技术是将一系列2D图像或视频转换为3D视频所采用的格式转换技术，英文翻译为2Dto3DVideoConversionTechnology。2D图像、2D视频均在被转换之列。也就是说，2Dto3D视频转换技术兼具2D图像to3D景观、3D景观to3D视频、2D视频to3D视频等组合。毕竟，3D景观只有空间概念，没有时间概念，只有再次被制作成具有时间概念的建筑动画，才有“3D视频”的意义。3D视频有时支持偏光式（polarized）、分时式（timeinterlaced）立体显示，有时适用于裸眼式（autostereoscopic）立体显示。譬如，微软研发的裸眼3D技术能通过镜头自动跟踪观众所在的位置，随时改变3D成像角度。观众（4人以内）保持相对固定的位置，裸眼就能观看3D视频。不管是实景视频，还是建筑动画，转换而成的3D视频均可用于3D电视、手机、笔记本电脑或柱状屏幕等播放环境。转换技术脱离不了“景观建模合成”或“深度信息计算”，也脱离不了对镜头运动的处理。迄今为止，2Dto3D视频转换技术主要采用以下4种方法： 　　（1）前期实景拍照与后期3D合成、输出。采用三维制作软件合成、输出，是一种传统的转换方法。这种方法先实景拍照，准备2D图像素材作为模型贴图；随后借助三维制作软件，按照实景建筑、小品比例构建模型，完成模型贴图，多角度渲染物体的前后关系和空间效果；再借助景观合成软件，合成实景建筑、小品灯景观，设置摄像机运动路径；最后输出图像序列帧，借助影视后期编辑软件，制作3D视频。这种方法可直接将2D图像转换为多镜头的实景图像，再合成为红蓝立体图或3D视频，因此，仍然延用传统3D建筑动画制作的方法，即沿着实景拍照→建模烘焙→合成场景→设置路径→制作动画的技术路线。但此方法保证了静态2D图像到静态3D场景再到动态3D场景的过渡，从而实现镜头运动。这种方法不涉及“深度信息计算”，不适宜借助计算机系统来转换那些直接拍摄实景而获得的2D视频。 　　（2）前期实景拍摄、多镜头合成与深度信息计算。这种方法采用实景拍摄与多镜头合成技术，最终呈现红蓝视觉偏差的影像。实景拍摄的立体效果强，视觉效果真实。可组合两台传统摄像机，完成拍摄全过程。两台传统摄像机之间可能因光影变化，或因摄影机内部参数的影响，使影像发生色差，而且存在专业技术强、制作成本高、耗费时间长等不足。招募的专业技术人才不仅要娴熟地调整光轴、控制景深等，还要承受长时间、高负荷的拍摄压力。对于美国、日本的2Dto3D视频转换公司而言，转换一部2小时左右的电影，需要300～400名工作人员耗费4～6个月的时间，转换一段1分钟左右的3D视频，制作成本可达7万多元（RMB）。 　　进行深度拍摄，所使用的摄像机由一台传统摄影机、一台深度摄影机组合而成。在这种情况下，必须校正传统摄影机与深度摄影机之间的组合关系参数，从而确保传统摄影机所拍摄到的像素有着对应的深度值。深度计算使用了Timeofflight原理，通过计算发出的红外光打中物体反射后的时间，从而测量物体与摄影机之间的距离。使用两台摄像机，目标点的深度信息是通过射线相交而获得的。相交汇的两束射线是指两幅2D图像中的像点与各自摄像机的光心交汇的射线。当完成摄像机的定标参数计算后，准确地建立所有的对应点，就可通过简单的三角计算来获得深度信息。 　　（3）后期制作、转换、显示与深度信息计算。深度信息计算既可在深度摄影机中完成，也可在计算机3D系统、3D转换与显示器中完成。经过计算机3D系统的深度信息计算，可渐变处理2D图像，并恢复实物表面的形状与轮廓。由于一幅2D图像所附带的3D景观信息、深度信息极其有限，所以必须在建模前确定背景图像的关键信息。只根据影像、无需校准数码相机的绘图技术（tourint