CN119724464A 一种内镜图像的描述报告生成方法、装置及介质 （中山大学肿瘤防治中心（中山大学附属肿瘤医院、中山大学肿瘤研究所））.docxVIP

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN119724464A

(43)申请公布日2025.03.28

(21)申请号202411711351.3

(22)申请日2024.11.27

(71)申请人中山大学肿瘤防治中心（中山大学附属肿瘤医院、中山大学肿瘤研究所）

地址510060广东省广州市越秀区东风东

路651号

(72)发明人经秉中贺龙君冯灵德罗琳娜李超峰邓一术陈浩华刘洋

(74)专利代理机构广州三环专利商标代理有限

公司44202

专利代理师邓健明

(51)Int.Cl.

G16H15/00(2018.01)

G06V10/26(2022.01)

G06V10/774(2022.01)

G16H30/20(2018.01)

权利要求书2页说明书9页附图2页

(54)发明名称

一种内镜图像的描述报告生成方法、装置及

介质

(57)摘要

CN119724464A本申请涉及人工智能领域，尤其是涉及一种内镜图像的描述报告生成方法、装置及介质。通过构建一个包括视觉编码器、大型语言模型和跨模态对齐模块的多模态内镜模型，将图像分析与文本生成相结合，对内镜图像实现从图像识别到文本描述的一体化处理，最终生成描述报告，从而实现了从图像到文本的高效转换，提高了内镜图像分析的速度和自