CN119672071A 一种基于模态统一表示的多模态统一目标跟踪方法 （大连理工大学）.docxVIP

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN119672071A

(43)申请公布日2025.03.21

(21)申请号202510193101.3

(22)申请日2025.02.21

(71)申请人大连理工大学

地址116024辽宁省大连市甘井子区凌工

路2号

申请人西安现代控制技术研究所

(72)发明人王栋常冠男卢湖川陈鑫

刘洋刘镇涛赵洁

(74)专利代理机构辽宁鸿文知识产权代理有限

公司21102

专利代理师李宝元

(51)Int.Cl.

G06T7/246(2017.01)

G06T3/4038(2024.01)

G06V10/80(2022.01)

G06V10/82(2022.01)

G06N3/0455(2023.01)

G06N3/08(2023.01)

权利要求书3页说明书5页附图1页

(54)发明名称

一种基于模态统一表示的多模态统一目标

跟踪方法

(57)摘要

CN119672071A本发明属于机器学习、计算机视觉、目标跟踪领域，公开了一种基于模态统一表示的多模态统一目标跟踪方法。通过一个多模态嵌入层，将可见光、深度、红外、事件、自然语言模态表示为统一的标记形式，使得训练一个Transformer模型对多种模态的联合特征提取与融合成为可能，从