基于多模态双线性池化的运动模式识别方法、装置及介质.pdfVIP

  • 15
  • 0
  • 约1.33万字
  • 约 13页
  • 2024-02-24 发布于四川
  • 举报

基于多模态双线性池化的运动模式识别方法、装置及介质.pdf

本发明公开一种基于多模态双线性池化的运动模式识别方法、装置及介质,包括:获取用户的多模态传感器数据;从所述多模态传感器数据中提取多个单模态传感器数据特征;将每个所述单模态传感器数据特征进行融合操作并拼接为一个多模态特征序列;将多模态特征序列输入LSTM,得到多模态时序特征序列,然后,通过软注意力机制,将多模态特征序列与多模态时序特征序列进行加权以及信息融合;将融合了时序信息的多模态特征输入多层感知机,预测运动模式。本发明提出多模态双线性注意力池化对多模态感知数据进行特征融合,通过利用模态间的信息

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN117592003A

(43)申请公布日2024.02.23

(21)申请号202410071684.8

(22)申请日2024.01.18

(71)申请人之江实验室

地址311121

文档评论(0)

1亿VIP精品文档

相关文档