一种二阶Transformer建模的视频行为识别方法.pdfVIP

  • 4
  • 0
  • 约1.03万字
  • 约 12页
  • 2023-05-29 发布于四川
  • 举报

一种二阶Transformer建模的视频行为识别方法.pdf

本发明公开了一种基于二阶Transformer建模的视频行为识别方法,包括:获取包含视频数据及标签的视频数据集,将视频数据集划分为训练集和测试集,并对视频数据集进行抽帧;将预训练的二阶Transformer架构作为骨干网络,该骨干网络使用二阶分类头进行数据分类;在该骨干网络中设计两种不同的时间建模方式,其一是在该网络中间的编码器内部插入标记移位模块和时空注意力模块,其二是在该网络的前端将3D时序卷积插入到标记嵌入模块中,从而构建出视频二阶Transformer网络;使用训练集训练视频二阶Tran

(19)国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 115830491 A (43)申请公布日 2023.03.21 (21)申请号 202211436285.4 (22)申请日 2022.11.16 (71)申请人 大连民族大学 地址 116000

文档评论(0)

1亿VIP精品文档

相关文档