AMD-Mamba：一种面向表型的多模态框架用于稳健的 AMD 预后评估.pdfVIP

AMD-Mamba：一种面向表型的多模态框架用于稳健的AMD

预后评估

123451,*

PuzhenWu,MingquanLin,QingyuChen,EmilyY.Chew,ZhiyongLu,YifanPeng,Hexin

Dong1,*

1DepartmentofPopulationHealthSciences,WeillCornellMedicine,NewYork,NY10022,USA

2DepartmentofSurgery,UniversityofMinnesota,Minneapolis,MN55455,USA

3DepartmentofBiomedicalInformaticsandDataScience,YaleSchoolofMedicine,NewHaven,CT

06510,USA

4NationalEyeInstitute,NationalInstitutesofHealth,Bethesda,MD20892,USA

本5NationalLibraryofMedicine,NationalInstitutesofHealth,Bethesda,MD20892,USA

译*Correspondingauthor(s).Email(s):yip4002@,hed4006@

中

1

v

7Abstract

5

9年龄相关性黄斑变性（AMD）是导致不可逆视力丧失的主要原因之一，因此有效的预后对于

2

0及时干预至关重要。在这项工作中，我们提出了AMD-Mamba，一种用于AMD预后的新型

.

8多模态框架，并进一步开发了一种新的AMD生物标志物。该框架将彩色眼底图像与遗传变

0

5异和社会人口统计变量相结合。其核心是引入了一种创新的度量学习策略，利用AMD严重

2程度评分作为先验知识。这种策略使模型能够通过将学习到的特征与临床表型对齐来学习更

:

v丰富的特征表示，从而提高传统预后方法捕捉疾病进展模式的能力。此外，不同于现有的使

i

x用传统的CNN骨干网络并主要关注局部信息（如玻璃膜疣的存在）的模型，AMD-Mamba应

r

a用了VisionMamba，并同时融合了局部和长程全局信息（如血管变化）。进一步地，我们通

过多尺度融合增强了预测性能，在不同分辨率下结合图像信息与临床变量。我们在AREDS

数据集上评估了AMD-Mamba，该数据集包括2,741名受试者的45,818张彩色眼底照片、52

个遗传变异和3个社会人口统计变量。我们的实验结果表明，我们提出的生物标志物是AMD

进展中最显著的生物标志物之一。值得注意的是，将此生物标志物与其他现有变量结合，在

早期阶段检测高风险AMD患者方面显示出有希望的进步。这些发现强调了我们的多模态框

架在促进更精确和主动管理AMD方面的潜力。

Keywords:年龄相关性黄斑变性（AMD）生存预测度量学习视觉曼巴

1.介绍

年龄相关性黄斑变性（AMD）是一种主要影响视网膜中央区域——负责清晰、详细视觉的黄斑区的进行

性和严重的眼病[1]。AMD的诊断主要基于彩色底片成像，该疾病通常可以分为早期、中期和晚期[2]。

1

NoAMD