基于双摄像机的多视点立体成像系统-信息与通信工程专业论文.docxVIP

独创性声明 本人声明所呈交的学位论文是本人在导师指导下进行的研究工作和取得的 研究成果，除了文中特别加以标注和致谢之处外，论文中不包含其他人已经发表 或撰写过的研究成果，也不包含为获得 天津大学 或其他教育机构的学位或证 书而使用过的材料。与我一同工作的同志对本研究所做的任何贡献均已在论文中 作了明确的说明并表示了谢意。 学位论文作者签名： 签字日期： 年 月 日 学位论文版权使用授权书 本学位论文作者完全了解 天津大学 有关保留、使用学位论文的规定。 特授权 天津大学 可以将学位论文的全部或部分内容编入有关数据库进行检 索，并采用影印、缩印或扫描等复制手段保存、汇编以供查阅和借阅。同意学校 向国家有关部门或机构送交论文的复印件和磁盘。 （保密的学位论文在解密后适用本授权说明） 学位论文作者签名： 导师签名： 签字日期： 年 月 日 签字日期： 年 月 日 摘 要 自由视点电视作为多视点成像最重要的应用，为用户提供了可以交互选择场 景观看角度的能力，打破了只能从摄像机视点观看的限制，增强了传统媒体所提 供的用户体验，越来越受到广泛的关注。本文首先介绍了自由视点电视相关技术 及国内外的主要发展，然后提出了一个最小失真校正和背景建模的前处理方法， 通过自适应十字窗口局部立体匹配算法生成视差图，最后通过线性插值生成中间 虚拟视点，进而搭建一个基于双摄像机的多视点自由立体成像系统，取得主要成 果如下： 1、本系统提出了一种新的针对未标定相机对极线校正方法，以尽量减少图 像失真。在图像级中单应矩阵被分解成一个平移矩阵，一个纯二维旋转矩阵、引 起图像校正失真的投影矩阵以及一个对齐矩阵。然后通过雅可比行列式衡量像素 级几何失真。然后，在对极几何限制下通过构造能量函数以减小几何失真； 2、选用鲁棒主成分分析（RPCA）进行系统背景重建，应用在获取的左右视 点视频，提取背景，之后只需计算前景物体的视差，大大简化了运算并提高了帧 间视差稳定性； 3、系统使用了一个快速的基于自适应十字窗口局部立体匹配算法。在根据 像素自动生成十字的基础上整合自适应生成局部支持区域开销在以近似准确地 进行视差的计算，基本达到全局算法的视差精度，并保留局部算法实现上的优势， 最后经过线性插值生成虚拟视点。 实验结果表明本系统可以实现对采集的视频可以实时处理生成中间虚拟视 点，支持八视点自由切换裸眼观看，避免了获取立体视频源对硬件设备的苛刻要 求，大大降低了成本。 关键词：多视点立体成像 最小图像失真校正 背景建模 自适应局部立体匹配 虚拟视点生成 ABSTRACT Free viewpoint television as the most important multi-view imaging applications provides users the ability to interactively select scene viewing angle, breaking the restrictions which can only be viewed from the camera viewpoint, and enhance the user experience provided by traditional media. Now it is more and more widespread concerned.This paper first introduces the development of free viewpoint television technology at home and abroad, and then proposed a minimum distortion rectification and background modeling as the pre-processing method, the disparity map is generated by local stereo matching algorithm based on the adaptive cross window, and finally generate intermediate virtual viewpoints by linear interpolation, and then set up a multiview stereoscopic imaging system with binocular cameras, made major achievements are as follows: The system proposes a new rectification method for uncalibrated stere