CN119494785A 一种基于多模态数据知识对齐融合的数据处理方法与装置 （中国人民解放军总医院第一医学中心）.docxVIP

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN119494785A

(43)申请公布日2025.02.21

(21)申请号202510072352.6

(22)申请日2025.01.17

(71)申请人中国人民解放军总医院第一医学中心

地址100853北京市海淀区复兴路28号

(72)发明人冯聪黄赛

(74)专利代理机构北京智桥联合知识产权代理事务所(普通合伙)11560

专利代理师季红军

(51)Int.Cl.

G06T5/50(2006.01)

G06T5/60(2024.01)

G06N3/045(2023.01)

G06N3/0464(2023.01)

权利要求书2页说明书11页附图4页

(54)发明名称

一种基于多模态数据知识对齐融合的数据

处理方法与装置

(57)摘要

CN119494785A本发明提供了一种基于多模态数据知识对齐融合的数据处理方法与装置，包括：对待融合图像对中的原始MR扫描图像和原始PET扫描图像进行预处理，得到对齐的待融合图像对；将对齐的待融合图像对输入训练好的孪生神经网络，得到待融合图像对匹配的权重图；对对齐的待融合图像对进行MST分解，得到低频系数矩阵和高频系数矩阵；基于权重图分别对低频系数矩阵和高频系数矩阵进行融合，并对融合低频系数矩阵和融合高频系数矩阵集进行