在线视频防抖技术研究及应用.pdfVIP

摘要

摘要

视频防抖，作为提高视频质量的关键组成部分，在网络技术发展日新月异，

短视频愈发流行的当下，是计算机视觉研究中的重要课题。视频防抖技术，用于

消除因各种内外部因素产生的视频抖动。这些抖动导致原本应当稳定的场景和对

象在画面中产生不必要的移动和颤动，影响观看体验，甚至使得观众感到不适。

伴随着计算机硬件和软件的不断发展，视频防抖技术也发生了许多变化。然而，

视频防抖技术，同时面临着诸多挑战，包括运动估计的准确性，处理复杂运动场

景，用户期望的多样性，实时处理的需求。本文对这些问题进行了深入探讨，并

提出了相应的优化和改进。本文的主要研究内容如下：

（1）针对2D视频防抖算法，采用了光流过滤特征点，提高运动估计准确性，

提出多单应性策略，精细化估计部分运动，提出自适应中值滤波，解决图像大小

变化带来的参数问题，使用了移动高斯平滑滤波方案，进行运动平滑，同时为了

适应实时处理的需求，修改该算法，使其能应用于在线稳像。在相同参数下，本

文所提出的改进算法相对原有算法，裁剪比例平均提高3.31%，失真比例提高2.12%，

稳定程度提高2.04%。

（2）针对3D视频防抖算法，改进原有无监督单目深度估计模型用于视频防抖，

引入更精确的光流估计网络，采用光流掩膜计算光流损失，几何损失和图像重构

损失，使用了无未来参考帧的时间一致性损失函数，实现了3D视频防抖算法下的

在线平滑。实验结果验证了加入光流损失，采用光流掩膜和时间一致性的有效性，

相较于原有方法，在相同参数下，裁剪比例平均提高1.01%，失真比例平均提高

3.31%，稳定程度平均提高1.42%。

（3）设计实现了视频防抖系统，将本文提出的视频防抖算法进行了实际应用，

提供了视频文件，直播流上传和防抖视频下载等功能，同时允许使用者针对不同

场景，自行设置平滑参数。

关键词：视频防抖，单目深度估计，在线平滑，光流过滤

I

ABSTRACT

ABSTRACT

Videostabilization,asakeycomponenttoimprovevideoquality,isanimportant

topicincomputervisionresearchwiththerapiddevelopmentofnetworktechnology

andtheincreasingpopularityofshortvideos.Videostabilizationtechnologyisusedto

eliminatevideojittercausedbyvariousinternalandexternalfactors.Thesejitterscause

unnecessarymovementsandvibrationsinthepictureoforiginallystablescenesand

objects,affectingtheviewingexperienceandevenmakingtheaudiencefeel

uncomfortable.Withthecontinuousdevelopmentofcomputerhardwareandsoftware,

videostabilizationtechnologyhasalsoundergonemanychanges.However,itstillfaces

numerouschallenges,includingtheaccuracyofmotionestimation,handlingcomplex

motionscenes,thediversityofuserexpectations,andtheneedforreal-timeprocessing.

Thisthesisconductsanin-depthdiscussionontheseissuesandproposescorresponding

opti