CN113656639B 视频检索方法及装置、计算机可读存储介质、电子设备 （网易（杭州）网络有限公司）.docxVIP

(19)国家知识产权局

(12)发明专利

(10)授权公告号CN113656639B(45)授权公告日2025.01.10

(21)申请号202110962699.X

(22)申请日2021.08.20

(65)同一申请的已公布的文献号申请公布号CN113656639A

(43)申请公布日2021.11.16

(73)专利权人网易(杭州)网络有限公司

地址310052浙江省杭州市滨江区长河街

道网商路599号4幢7层

(72)发明人周密唐景群姜波胡光龙

(74)专利代理机构北京律智知识产权代理有限公司11438

专利代理师王辉阚梓瑄

GO6V20/40(2022.01)

GO6V10/82(2022.01)

GO6N3/0464(2023.01)

GO6T3/4038(2024.01)

GO6T5/40(2006.01)

GO6T7/90(2017.01)

(56)对比文件

CN110688524A,2020.01.14

CN111026915A,2020.04.17

审查员陈晓静

(51)Int.CI.

GO6F16/735(2019.01)

GO6F16/783(2019.01)权利要求书4页说明书17页附图7页

(54)发明名称

视频检索方法及装置、计算机可读存储介质、电子设备

(57)摘要

CN113656639B本公开的实施方式涉及计算机技术领域，更具体地，本公开的实施方式涉及视频检索方法及装置、计算机可读存储介质和电子设备。所述方法包括：获取待检索视频，提取所述待检索视频中包括的关键帧，并根据所述关键帧得到多个关键帧图像；将所述多个关键帧图像输入到视频指纹提取模型，得到与待检索视频对应的视频级特征以及视频片段级特征，通过所述视频级特征以及视频片段级特征得到所述待检索视频的视频指纹；利用所述视频指纹进行检索，得到与所述

CN113656639B

获取待检索视频，提取所述待检索视频中包括的关键帧，并根据所述关键帧得到多个关键帧图像

将所述多个关键帧图像输入到视频指纹提取模型，得到与

待检索视频对应的视频级特征以及视频片段级特征，通过

所述视频级特征以及视频片段级特征得到所述待检索视频

的视频指纹

利用所述视频指纹进行检索，得到与所述待检索视频相似的视频

S2

S3

CN113656639B权利要求书1/4页

2

1.一种视频检索方法，其特征在于，包括：

获取待检索视频，提取所述待检索视频中包括的关键帧，并根据所述关键帧得到多个关键帧图像；

将所述多个关键帧图像输入到视频指纹提取模型，得到与待检索视频对应的视频级特征以及视频片段级特征，通过所述视频级特征以及视频片段级特征得到所述待检索视频的视频指纹；其中，所述视频指纹提取模型中至少包括镜头边界预测模型、关键帧图像特征提取模型、时序模型以及视频特征提取模型；将所述关键帧图像输入到所述视频指纹提取模型，得到与待检索视频对应的视频级特征以及视频片段级特征，包括：将所述多个关键帧图像输入到所述关键帧图像特征提取模型中，通过所述关键帧图像特征提取模型中的深度特征网络，得到与各个所述关键帧图像对应的关键帧图像特征；将所述关键帧图像特征输入到所述时序模型中，对所述关键帧图像特征进行学习，得到与所述关键帧图像特征对应的时序特征；将所述时序特征输入到所述视频特征提取模型中得到与所述待检索视频对应的视频级特征；将所述时序特征输入到所述镜头边界预测模型中，得到片段子特征，并将所述片段子特征输入到所述视频特征提取模型中，得到与所述待检索视频对应的视频片段级特

征；

获取与视频数据库中包括的视频对应的视频级特征，根据所述视频数据库中包括的视频级特征构建搜索树；利用所述待检索视频的视频级特征在所述搜索树中进行查找，得到与所述待检索视频相似的多个候选视频；获取所述候选视频的视频片段级特征，通过与所述待检索视频对应的视频片段级特征以及所述候选视频的视