CN119646161A 偏好学习方法、模型应用方法、装置、设备和存储介质 （中国工商银行股份有限公司）.docxVIP

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN119646161A

(43)申请公布日2025.03.18

(21)申请号202411820212.4

(22)申请日2024.12.11

(71)申请人中国工商银行股份有限公司

地址100140北京市西城区复兴门内大街

55号

(72)发明人刘安平金昕黄俊

(74)专利代理机构中科专利商标代理有限责任

公司11021

专利代理师王雨

(51)Int.Cl.

G06F16/3329(2025.01)

G06F18/214(2023.01)

权利要求书2页说明书13页附图5页

(54)发明名称

偏好学习方法、模型应用方法、装置、设备和

存储介质

(57)摘要

CN119646161A本公开提供了一种偏好学习方法，可以应用于人工智能技术领域。该偏好学习方法包括：从大模型预训练的文本文档中，确定与预设标准相匹配的样本问题，其中，预设标准中包括正向标准和反向标准，样本问题用于表征用户与大模型交互时所产生的问题；将多个样本问题输入大模型中，以根据大模型输出的与每个样本问题对应的答案，生成多个问答对；利用多个评估模型，基于正向标准分别对每个问答对中的答案进行评估，得到与每个问答对对应的评估标签；利用基于评估标签生成的偏好数据，对大模型进行训练，得到与正向标准对齐的