CN119556791A 多模态指令交互方法、系统、计算设备及存储介质 （深圳元想视界科技集团有限公司）.docxVIP

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN119556791A

(43)申请公布日2025.03.04

(21)申请号202411122271.4

(22)申请日2024.08.15

(71)申请人深圳元想视界科技集团有限公司

地址518000广东省深圳市南山区粤海街

道高新区社区科技南八路2号豪威科

技大厦1402

(72)发明人董鑫鑫杨柳张邦禹范小林

(74)专利代理机构深圳市徽正知识产权代理有限公司44405

专利代理师汪栋

(51)Int.Cl.

G06F3/01(2006.01)

G06F3/04815(2022.01)

G06F3/0484(2022.01)

G06N3/08(2023.01)

权利要求书2页说明书8页附图3页

(54)发明名称

多模态指令交互方法、系统、计算设备及存

储介质

(57)摘要

CN119556791A本申请公开一种基于虚拟人物的多模态指令交互方法、系统、计算设备及存储介质，所述方法包括获取用户姿态数据并进行识别，获取姿态数据对应的第一操作指令；获取用户的语音数据并进行识别获取用户的意图数据，根据意图数据获取对应的第二操作指令；将第一操作指令和第二操作指令进行时间戳对齐，并计算其在语义空间的相似度，用加权平均的方法对第一操作指令和第二操作指令进