CN119598389A 多模态数据处理方法、家电设备及其控制方法、系统 （芜湖美的厨卫电器制造有限公司）.docxVIP

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN119598389A

(43)申请公布日2025.03.11

(21)申请号202411555635.8

(22)申请日2024.10.31

(71)申请人芜湖美的厨卫电器制造有限公司

地址241009安徽省芜湖市芜湖经济技术

开发区东区万春东路

(72)发明人刘亚涛张亚菲张力潇

(74)专利代理机构深圳市威世博知识产权代理事务所(普通合伙)44280

专利代理师钟子敏

(51)Int.Cl.

G06F18/25(2023.01)

G06N5/04(2023.01)

权利要求书2页说明书14页附图11页

(54)发明名称

多模态数据处理方法、家电设备及其控制方

法、系统

(57)摘要

CN119598389A本申请公开了多模态数据处理方法、家电设备及其控制方法、系统。该方法包括：获取多模态数据；其中，多模态数据至少包括文本数据、图像数据和语音数据中至少一种，以及传感器数据；传感器数据由家电设备对应的传感器采集得到；利用至少两种融合方式，对多模态数据进行数据融合，得到具有统一语义空间的多模态融合数据。通过上述方式，能够实现家电领域多模态数据的有效融合，打破数据孤岛，进一步，在统一的语义空间中实现不同模态数据的精确对齐，能够在将多模态融合数据输入至大语言模型