区分胶质母细胞瘤和单发性脑转移瘤的多模态融合深度学习模型的开发和验证_NormalPdf (1).docxVIP

58

中南大学学报（医学版）

JCentSouthUniv(MedSci)

2024,49(1)

·ARTICLES·

DOI：10.11817/j.issn.1672-7347.2024.230248

·论著·

区分胶质母细胞瘤和单发性脑转移瘤的多模态融合深度学习模型的开发和验证

申珊珊1,2，李春泉2，范耀华1，卢山富3，颜子夜3，刘虎4，周海航5，张子健6

(1.嘉兴市第二医院肿瘤内科，浙江嘉兴314000；2.南昌大学信息工程学院，南昌330031；

3.柏视医疗科技有限公司，广州510530；4.嘉兴市第二医院放射科，浙江嘉兴314000；

5.嘉兴市第二医院神经外科，浙江嘉兴314000；6.中南大学湘雅医院肿瘤科，长沙410008)

[摘要]目的：胶质母细胞瘤(glioblastoma，GBM)和脑转移瘤(brainmetastases，BMs)是成人中常见的恶性脑肿瘤，目前磁共振成像(magneticresonanceimaging，MRI)是筛查和评估脑肿瘤预后的常用方法，但其鉴别诊断GBM和BMs的特异性和敏感性有限。近年来，深度神经网络在诊断分类和创建临床决策支持系统方面显示出极大的潜力。本研究旨在应用深度学习技术提取的放射组学特征，探讨其在初诊GBM和单发性脑转移瘤(solitarybrainmetastases，SBMs)术前准确分类中的可行性，进一步探索基于多模态数据融合对分类任务的影响。方法：回顾性分析经组织病理或临床诊断证实的135例初诊GBM患者和73例SBMs患者的头颅MRI序列数据。首先，选择结构性T1加权、T1C加权和T2加权作为整个模型的3个输入，在配准后的3种模态MR图像上人工勾画感兴趣区域(regionsofinterest，ROI)，并获取多模态放射组学特征，使用基于随机森林(randomforest，RF)的特征选择方法降低维度，进一步分析每个特征的重要性。然后，通过对比解纠缠的方法寻找不同模态特征之间的共享特征和互补特征。最后，通过融合不同模态的2种特征，预测每个样本对GBM和SBMs的响应。结果：应用机器学习和本文提出的多模态融合方法的放射组学特征对GBM和SBMs有较好的区分能力。相较于单模态数据，应用支持向量机(supportvectormachine，SVM)、Logistic回归、RF、自适应增强(adaptiveboosting，AdaBoost)、梯度提升决策树(gradientboostingdecisiontree，GBDT)机器学习算法的多模态融合模型均取得了较大提升，曲线下面积(areaunderthecurve，AUC)分别为0.974、0.978、0.943、0.938、0.947。本研究的对比解纠缠多模态MR融合方法表现更好，测试集上AUC、准确度(accuracy，ACC)、灵敏度(sensitivity，SEN)、特异度(specificity，SPE)分别为0.985、0.984、0.900、0.990。相较于其他多模态融合方法，本研究方法的AUC、ACC和SEN均呈现出最好的性能表现。验证本研究各模块组件作用的消融实验中，同时使用3种损失函数后，AUC、ACC和SEN分别提升了1.6%、10.9%和15.0%。结论：基于深度学习的对比解纠缠多模态MR放射组学特征融合技术有助于提高GBM和SBMs的分类准确性。

[关键词]胶质母细胞瘤；单发性脑转移瘤；深度学习；多模态数据；解纠缠

收稿日期(Dateofreception)：2023-06-14

第一作者(Firstauthor)：申珊珊，Email:shenshanshan@,ORCID:0000-0002-5810-9426

通信作者(Correspondingauthor)：张子健，Email:wanzzj@,ORCID:0000-0002-2702-8025

基金项目(Foundationitem)：国家自然科学基金；湖南省自然科学基金(2023JJ50014)。ThisworkwassupportedbytheNationalNaturalScien