全景视频的快速拼接方法研究.pdf

哈尔滨工业大学工学硕士学位论文

摘要

随着虚拟现实技术的不断发展，人们对于全景视频的需求愈发强烈，全景

视频拼接方法也具有越来越重要的研究价值。而传统的全景视频拼接方法难以

平衡高图像质量和实时性之间的要求，因此，本文提出了一种全景视频拼接系

统，注重拼接图像质量的同时满足了实时性要求。本文的工作总结如下：

（1）本文提出了一种基于CIELab颜色空间和增益模型的亮度校正算法。

该方法先将图像由RGB颜色空间转换至正交化的CIELab颜色空间，接着根据

重叠区域内亮度通道的均值和方差构造方程组，通过最小二乘法和奇异值分解

方法得到方程组的近似解，根据方程组的解来构造增益模型进而调整图像亮

度。该算法可以减少多幅待拼接图像之间的亮度差异，改善拼接后的全景图像

出现明暗边界的问题，提高全景图像的亮度一致性。

（2）为了拼接亮度校正后的多幅待拼接图像得到全景图像，本文提出了一

种基于动态规划和预先估计的缝合线搜索算法，该方法在构建能量函数时，不

仅考虑了同一位置像素强度差异，而且考虑了相邻位置像素强度差异，然后在

每个重叠区域内搜索缝合线，通过动态规划算法得到优化解，最后根据这些缝

合线可以将多幅图像拼接得到全景图像。该算法可以减少前景物体出现破碎或

鬼影等问题，使全景图像在重叠区域的过渡更加自然，从而提高全景图像的主

观视觉效果。

（3）本文搭建了全景视频拼接系统，设计图像投影、亮度校正、图像拼接

等多个模块，实现了由输入多路待拼接视频到输出一个全景视频的完整流程。

为了提高系统的拼接效率，考虑到视频具有时序性，当前时刻的缝合线位置可

以选择参考前一帧缝合线位置；在搜索缝合线前对图像进行下采样，来缩短缝

合线搜索的时间；并且联合CPU和GPU、多线程和多CUDA流来加速各个图

像处理的过程。经过实验测试，全景视频拼接系统对4路2K、4K、8K视频的

拼接速度分别达到58.26FPS、48.21FPS、31.65FPS，满足了实时拼接的要求。

关键词:全景视频拼接；图像处理；亮度校正；缝合线搜索

-I-

哈尔滨工业大学工学硕士学位论文

Abstract

Withthedevelopmentofvirtualrealitytechnology,peoplesdemandfor

panoramicvideobecomesmoreandmoreintense,andthepanoramicvideo

stitchingmethodhasmoreandmoreimportantresearchvalue.However,the

traditionalpanoramicvideostitchingmethodisdifficulttobalancetherequirements

ofhighimagequalityandreal-time.Therefore,apanoramicvideostitchingsystem

isproposedinthispaper,whichpaysattentiontothequalityofimagestitchingand

meetsthereal-timerequirements.Theworkofthispaperissummarizedasfollows:

ThispaperpresentsabrightnesscorrectionalgorithmbasedonCIELabcolor

spaceandgainmodel.Inthismethod,theimageisconvertedfromRGBcolorspace

tothenormalizedCIELab