CN120030132A 基于多模态大模型的问答数据处理方法及系统 （数据堂（北京）科技股份有限公司）.docxVIP

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN120030132A

(43)申请公布日2025.05.23

(21)申请号202510510268.8

(22)申请日2025.04.23

(71)申请人数据堂（北京）科技股份有限公司

地址100080北京市海淀区宝盛南路1号院

11号楼1层101-01

(72)发明人齐红威丰强泽肖永红栗全峰郑继龙史红欣

(74)专利代理机构郑州欧凯专利代理事务所(普通合伙)41166

专利代理师毛志强

(51)Int.Cl.

G06F16/3329(2025.01)

G06F40/205(2020.01)

G06F40/30(2020.01)

权利要求书3页说明书11页附图3页

(54)发明名称

基于多模态大模型的问答数据处理方法及

系统

(57)摘要

CN120030132A本申请涉及智能问答技术领域，其具体地公开了一种基于多模态大模型的问答数据处理方法及系统，其采用基于深度学习的多模态数据处理技术对用户输入的文本问题和图像模态上下文进行语义解析，分别提取出文本问题和图像模态上下文的语义特征，接着对两者进行线性投影以实现特征对齐，并引入跨模态特征全域关联交互机制，挖掘文本问题与图像模态上下文之间的深层次语义关联，实现对文本问题和图像模态上下文信息的