CN120235185A 基于难度加权对比学习的大型多模态嵌入模型的训练方法 （厦门大学）.docxVIP

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN120235185A

(43)申请公布日2025.07.01

(21)申请号202510250242.4

(22)申请日2025.03.04

(71)申请人厦门大学

地址361000福建省厦门市思明南路422号

(72)发明人苏劲松蓝志彬

(74)专利代理机构厦门创象知识产权代理有限

公司35232

专利代理师廖吉保

(51)Int.Cl.

G06N3/045(2023.01)

G06N3/048(2023.01)

G06N3/0455(2023.01)

G06N3/094(2023.01)

G06N5/04(2023.01)

权利要求书1页说明书9页附图3页

(54)发明名称

基于难度加权对比学习的大型多模态嵌入

模型的训练方法

(57)摘要

CN120235185A本申请的实施例提供了一种基于难度加权对比学习的大型多模态嵌入模型的训练方法。该方法包括：构建多模态嵌入模型以作为策略模型，并引入独立于所述策略模型的奖励模型，所述奖励模型用以动态评估负样本对的难度，并生成对应的权重值；获取训练数据集，所述训练数据集包括正样本对和负样本对；根据所述训练数据集对所述策略模型进行训练，并在训练过程中，基于所述奖励模型计算所述负样本对的权重值，根据所述权重值调