CN119848555A 大模型数据标注方法、装置、设备、介质及产品 （苏州元脑智能科技有限公司）.docxVIP

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN119848555A

(43)申请公布日2025.04.18

(21)申请号202510332571.3

(22)申请日2025.03.20

(71)申请人苏州元脑智能科技有限公司

地址215000江苏省苏州市吴中经济开发

区郭巷街道官浦路1号9幢

(72)发明人陈曦

(74)专利代理机构北京开阳星知识产权代理有限公司11710

专利代理师阮改燕

(51)Int.Cl.

G06F18/214(2023.01)

G06F18/2415(2023.01)

G06F18/2431(2023.01)

G06F16/353(2025.01)

G06F40/253(2020.01)

G06F40/284(2020.01)

G06N3/02(2006.01)

权利要求书3页说明书12页附图1页

(54)发明名称

大模型数据标注方法、装置、设备、介质及产

品

(57)摘要

CN119848555A本申请公开了一种大模型数据标注方法、装置、设备、介质及产品，通过对待分类任务的输入文本和提示词进行语法变换，生成多样化的大模型输入，从不同角度考察大模型的标注一致性，从而更准确地评估模型的评估结果。通过多个预训练语言模型对多种输入版本进行标注，从而更全面地评估大模型对输