快速创建全景视频及去鬼影方法的研究与实现-计算机科学与技术专业论文.docxVIP

万方数据 万方数据 Classified Index: TP391.41 U.D.C: 621.38 Dissertation for the Master Degree of Engineering THE RESEARCH AND IMPLEMENTATION OF FAST PANORAMIC VIDEO CONSTRUCTION AND DEGHOSTING Candidate: Chenhong Yuan Supervisor: Prof. Jeng-Shyang Pan Academic Degree Applied for: Master of Engineering Specialty: Computer Science Technology Affiliation: Shenzhen Graduate School Date of Defence: December, 2013 Degree-Conferring-Institution: Harbin Institute of Technology 摘 要 作为计算机视觉的研究热点，全景图像拼接技术受到更多关注。全景图像通 常是指满足人类正常视角以及余光所视范围，甚至超过 360 度全视角的图像。全 景图像拼接是指将许多具有重合区域的图像进行拼接生成可视范围更广的图像。 全景图像拼接技术的应用领域十分广泛，该项技术可以用在道路监控、军事红外 成像、微创手术等方面。随着计算机硬件的发展，全景图像拼接技术已应用到智 能终端及视频监控领域。 全景图像建立过程中的计算效率过低是制约其应用的主要因素。本课题目标 是设计出一种快速创建全景视频的方法，可以在处理每一帧图像上达到实时性的 要求。本文首先介绍了全景图像拼接技术的技术背景及研究意义。紧接着介绍了 该技术的国内外研究现状以及相关理论。接下来本文介绍了全景图像拼接的主要 步骤，包括图像预处理、特征点提取及匹配、单应性矩阵估计和图像融合。由于 特征点提取是图像拼接技术的基础，本论文对特征点提取技术进行了重点研究。 在系统实现方面，本课题在特征点提取方法上采用 SURF 算法，并提出一种 排除 SURF(Speed Up Robust Features)算法所产生的错误匹配的方法。传统单应性 矩阵采用单个矩阵对图像进行坐标变换，本文以双重单应性矩阵为理论基础并对 其进行改进，提高了图像拼接的效果。鬼影现象是全景图像拼接所面临的普遍问 题并且很难避免，人类视觉对该现象十分敏感，去除鬼影现象是图像拼接技术的 研究重点。鬼影现象根据其成因一般可分为两种，一种是当移动物体穿过融合区 域，由于两个摄像头之间的视差使其投影坐标产生微小差异而产生鬼影现象。另 一种产生于拼接的接缝线处，由于接缝线为拼接图像产生视差的极值点，因此移 动物体穿过接缝线时会产生鬼影现象。本文结合图像相减技术及平滑融合方法有 效的排除了鬼影现象。由于本课题在拼接过程中简化了最优缝合线搜索的步骤， 因此该方法的时间复杂度较低，在图像拼接过程中可达到实时性要求。 本文在去鬼影方面与简单线性融合算法、泊松融合算法、multi-band 融合算 法进行了比较。实验结果显示，本文所提出的方法在去除鬼影的效果及时间消耗 方面明显优于以上方法。本文所提出的方法可在普通个人计算机上实现，实验结 果显示其运行帧率可达到每秒 30 帧，满足实时性要求。 关键字：全景图像拼接；特征提取；图像融合；去鬼影 ABSTRACT The technology of panoramic image stitching has attracted much attention as the research focus of computer vision. A panoramic image usually refers to the image that meets normal view angle and binocular peripheral vision of human or 360-degree full range of scene. Panoramic image stitching technology can be used in many fields such as road monitoring, military infrared imaging, and minimally invasive surgery and so on. With the development of computer hardware, panoramic image stitching technology has been widely applied to intellig