基于R(2+1)D三元孪生网络的短视频指纹提取.pdfVIP

测控技术

2022年第41卷第4期・11・

基于R(2+1)D三元挛生网络的短视频指纹提取

王逸舟▽，张菁张淑莹V,卓力V

(1.北京工业大学信息学部，北京100124；2.计算智能与智能系统北京市重点实验室，北京100124)

摘要：随着自媒体时代的兴起，网民自制的短视频数据在网络上广泛传播,视频版权保护已成为重中之

重。视频指纹技术将数字视频内容映射为唯一的身份描述符，用于视频数据的智能化审核。如何充分

挖掘短视频的时空信息和视频间的关联性形成有效的视觉特征表达，是决定短视频指纹质量的关键因

素。因此，基于R(2+1)D三元李生网络模型，提出一种短视频指纹提取方法。首先，使用R(2+1)D

卷积神经网络模型提取短视频的时空特征;然后构建权重参数共享的三元组网络学习成组视频的关联

性，映射为紧凑的哈希特征表示；最后通过哈希层编码为视频指纹。在CC_Web_Vide和VCDB数据

集进行了实验，结果表明该方法可以在保证短视频指纹紧凑性的前提下，取得优于其他算法的性能

指标。

关键词：短视频指纹提取；R(2+1)D；李生网络;三元组损失；时空特征

中图分类号:TP391文献标志码:A文章编号：1000-8829(2022)04-0011-08

doi:10.19708/j.ckjs.2022.04.002

ShortVideoFingerprintingExtractionBasedonR(2+1)DTriplet

SiameseNetworks

WANGYi-zhou12,ZHANGJing12*,ZHANGShu-ying12,ZHUOLi12

(1.FacultyofInformation,BeijingUniversityofTechnology,Beijing100124,China;

2.BeijingKeyLaboratoryofComputationalIntelligenceandIntelligentSystem,Beijing100124,China)

Abstract：WiththeriseofWeMediaera,shortvidedatacreatedbyInternetusersarewidelyspreadonthe

network,andvidecopyrightprotectionhasbecomeatoppriority.Videfingerprintingtechnologyrepresents

digitalvidecontentasauniqueidentitydescriptorforintelligentauditofvidedata.Howtfullyexplorethe

spatiotemporalinformationofshortvideosandthecorrelationbetweenvideostformaneffectivevisualfeature

representationisthekeyfactortdeterminethequalityofshortvidefingerprinting.Therefore,ashortvide

fingerprintingextractionmethodbasedonR(2+1)DtripletSi