基于SURF和改进RANSAC视频拼接算法.docVIP

基于SURF和改进RANSAC视频拼接算法 　　摘 要： 在传统的视频拼接算法中，配准的误差和运动的物体都会使拼接结果产生鬼影，而复杂的融合算法又难以满足实时性要求。针对上述问题，以平行光轴且光心位于同一水平基线位置的双目相机采集的视频图像为研究对象，提出一种基于限定区域和SURF算法的视频拼接方法。针对采集到的具有20%～30%重叠感兴趣区域（ROI）的视频图像，每24帧设置一个关键帧，仅对关键帧的ROI区域采用SURF算法寻找特征匹配点对。然后采用改进的RANSAC算法筛选单应性变换矩阵H，对非关键帧直接采用此单应性变换矩阵H进行图像融合。实验结果表明，采用关键帧计算特征点的方式得到的视频拼接效果能够很好地消除鬼影，同时也能够保证视频融合的实时性。 　　关键词： 视频拼接； ROI； 关键帧； RANSAC 　　中图分类号： TN911.72?34 文献标识码： A 文章编号： 1004?373X（2016）10?0044?05 　　Video stitching algorithm based on SURF and improved RANSAC 　　CHEN Xuetao， MU Chunyang， MA Xing 　　（Institute of Information and Communication Technology， Beifang University of Nationalities， Yinchuan 750021， China） 　　Abstract： In the traditional video stitching， the calibration error and the motion of an object may cause the ghost shadows in stitching results. In addition， the complex fusion algorithm can’t meet the real?time requirement. In order to solve the above problems， the video images acquired by binocular camera that has a parallel optical axis and its optic center is at the same horizontal baseline are studied， and a new method of real?time video stitching based on limited region and SURF algorithm is put forward in this paper. A key frame is set per 24 frames for the video images with 20%～30% overlap area in ROI area. the SURF algorithm is used to look for the feature matching point pairs in the ROI overlap area of key frame only. The homography transformation matrix H is selected with the improved RANSAC algorithm， and then the image fusion is executed for non?key frames by using the transformation matrix H directly. The experiment results show that the video stitching algorithm proposed in this paper can eliminate the ghost shadows well， also can ensure the real?time performance of video. 　　Keywords： video stitching； ROI； key?frame； RANSAC 　　0 引 言 　　人们获取信息的方式多种多样，例如通过触觉、视觉、嗅觉和听力等，其中视觉是最直接也是最广泛的获取信息的方式之一。在现代社会中，人们通过视觉获取大量有用信息。由于人的视角或者机器的视角范围有限，因此，对多个视频进行拼接并形成大视角范围的图[1]，这有着非常重大的研究意义。视频拼接技术在许多方面有着重要的应用，例如环境监测[2]、监控系统[3]和生物工程[4]等