单目视频中深度生成算法研究.pdfVIP

A Thesis Submitted to Shanghai Jiao Tong University in Partial Fulfillment of the Requirements for the Degree of Master ALGORITHMS FOR DEPTH MAP GENERATION FROM MONOCULAR VIDEOS Specialty: Electronics and Communication Engineering Author: Zhang Peng Advisor: Prof. Wang Jia School of Electronics and Electric Engineering Shanghai Jiao Tong University December, 2009 单目视频中深度图生成算法研究 摘 要 随着科技发展日新月异，由二维平面显示过渡到三维立体显示的技 术越来越受到专家学者的关注。本文从介绍立体视频的背景与发展开始， 逐步引入当前各种最新的立体视频显示技术，并详细介绍单目视频融合 深度信息的立体显示技术。在这项技术中，深度图像生成至关重要。本 文详细论述了从单目视频序列获取图像深度信息的方法，该研究方向为 立体视频深度图像的绘制提供了一些可行性方案，同时也为立体视频技 术的发展提供一些宝贵思路。 本文提出了两种半自动深度图生成方法：第一，利用改进型的颜色 自适应深度递推滤波器生成深度图，该方法通过子采样提高滤波器的处 理效率，利用自适应窗减小由运动补偿产生的错误以及利用中值滤波器 提高深度图像的整体质量。第二，提出一种基于置信度映射的半自动深 度产生算法，利用关键帧深度信息和改进的双向双边滤波算法产生其他 帧深度信息。该算法利用置信度映射技术减轻未被遮挡区域的模糊程度， 当前景物体和未被遮挡的后景区域颜色差异很大时，仍可以得到比较满 意的深度图像。最后本文对两种算法的性能进行了比较。 二维视频转换成三维视频是一个新兴的领域，更是一个较难的研究 I 课题。它以计算机视觉及人眼视觉特性为基础，同时需要综合各种图像 及视频处理方法。本文在该领域内提出深度图生成的改进算法，并通过 实验证明算法的可行性和有效性，取得比较满意的结果。 关键词：立体视频，深度图，颜色自适应深度递推滤波器，关键帧，置 信度映射，双向双边滤波器 II ALGORITHMS FOR DEPTH MAP GENERATION FROM MONOCULAR VIDEOS ABSTRACT With the great development of science and technology in recent years, more and more researchers begin to concern about the techniques of converting two dimension (2D) video to three dimension (3D) video. The paper begins with the introduction of the background and development of 3D video, and then provides a review of the latest development of 3D video. It also introduces stereoscopic display technique which makes use of