三维视频深度图优化编码的研究-信号与信息处理专业论文.docxVIP

万方数据 万方数据 独创性声明 本人声明所呈交的学位论文是本人在导师指导下进行的研究工 作及取得的研究成果。据我所知，除了文中特别加以标注和致谢的地 方外，论文中不包含其他人已经发表或撰写过的研究成果，也不包含 为获得电子科技大学或其它教育机构的学位或证书而使用过的材料。 与我一同工作的同志对本研究所做的任何贡献均已在论文中作了明 确的说明并表示谢意。 作者签名： 日期： 年 月 日 论文使用授权 本学位论文作者完全了解电子科技大学有关保留、使用学位论文 的规定，有权保留并向国家有关部门或机构送交论文的复印件和磁 盘，允许论文被查阅和借阅。本人授权电子科技大学可以将学位论文 的全部或部分内容编入有关数据库进行检索，可以采用影印、缩印或 扫描等复制手段保存、汇编学位论文。 （保密的学位论文在解密后应遵守此规定） 作者签名： 导师签名： 日期： 年 月 日 摘 摘 要 摘 要 随着移动通信技术及显示技术的不断发展，三维视频因其能够为观众提供更 加真实视觉感受，而受到学术界和工业界广泛的关注和研究。目前，三维视频包 括纹理图和深度图，其数据量非常大，对视频压缩效率的要求很高，为了解决这 一难题，制定了相关的编码标准。基于深度的三维视频系统，利用虚拟视合成技 术，可以生成任意视点位置的纹理图。因此，深度图编码的好坏将直接决定合成 视的质量。深度图反映了物体和摄像机之间的距离关系，在物体边缘变化剧烈， 反映到平面图像上显示为小部分尖锐边界被大面积缓慢变化的平坦区域所包围。 本文主要围绕深度图编码开展如下的研究工作。 ⑴基于深度滤波技术的编码优化：尖锐边界对合成视质量影响很大，直接决 定编码效率。分析尖锐边界经过滤波处理后，高频信息被舍弃，边缘可能会变得 模糊，这直接影响到深度图编码效率和合成视质量。针对这一问题，提出相关滤 波技术的优化方法。 ⑵基于深度无视点失真模型的编码优化：在三维视频显示过程中，深度图是 通过合成不同视点纹理图让观察者获得立体视频的效果。分析合成过程中，参考 视像素点会映射到虚拟视对应的位置上，被映射的位置可能是分像素，经过四舍 五入到相邻整像素位置上，可能存在多个邻近像素在合成过程中映射位置完全相 同。根据这一思想，建立无视点失真模型，从空间位置相关性、深度-纹理相关性 和时间相关性三个方面建模，实现了基于深度图的空-时域三边滤波方法，并对滤 波强度进行了优化处理。 ⑶基于深度合成视质量增强的编码优化：分析深度图中小部分尖锐边界对合 成视的作用很大，大面积的平坦区域影响较小，得出平坦区域不需要过多码率。 针对这种问题，提出基于深度图采样的编码框架。在下采样过程中，为了使样点 更均匀的覆盖在物体表面，引入了错位下采样方法，上采样为了更好的解决参考 信息较少的问题，引入了视点间参考信息。在消耗相同的码率情况下，该方法比 其他方法得到了更好的合成视质量。 通过对上述算法进行测试实验证明，深度图编码效率和合成视质量均得到了 提高，实现了三维视频深度图优化编码。 关键词：三维视频，深度图，滤波，无视点失真模型，采样 I AB ABSTRACT ABSTRACT With the continuous development of mobile communication technology and display technology, 3D video has been widely concerned and researched by academia and industry since it could able to provide a more realistic visual experience for the audience. At present, 3D video coding contains the texture map and the depth map which has a large amount of data, and video compression efficiency requirements are very high. In order to solve these problems, the 3D video coding standards are formulated. In the depth-based 3D video system, a virtual video of any viewpoint can be rendered by utilizing the virtual view synthesis. As a result, the quality of depth map coding will directly determin