CN119599014A 基于多模态实体对齐的图片描述生成方法 （中国传媒大学）.docxVIP

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN119599014A

(43)申请公布日2025.03.11

(21)申请号202510142480.3

(22)申请日2025.02.10

(71)申请人中国传媒大学

地址100024北京市朝阳区定福庄东街1号

(72)发明人杨成周劲飞张亚娜朱亚平

(74)专利代理机构北京天达知识产权代理事务所有限公司11386

专利代理师刘丰艺

(51)Int.Cl.

G06F40/284(2020.01)

G06F40/289(2020.01)

G06F18/213(2023.01)

G06F18/25(2023.01)

G06V10/44(2022.01)

G06V10/82(2022.01)

G06N3/045(2023.01)

权利要求书3页说明书14页附图6页

(54)发明名称

基于多模态实体对齐的图片描述生成方法

(57)摘要

CN119599014A本发明涉及一种基于多模态实体对齐的图片描述生成方法，属于图像处理技术领域，解决了现有技术中图像实体描述准确性不高的问题。具体步骤包括：基于包含标注实体后的图像和与其相关文章的第一样本集，训练得到多模态实体对齐模型；基于包含标注描述后的图像和与其相关文章的第二样本集，利用多模态实体对