CN115344696B 一种基于主动学习的开放域小样本文本学习方法 （电信科学技术第十研究所有限公司）.docxVIP

(19)国家知识产权局

(12)发明专利

(10)授权公告号CN115344696B(45)授权公告日2025.07.08

(21)申请号202210927182.1

(22)申请日2022.08.03

(65)同一申请的已公布的文献号申请公布号CN115344696A

(43)申请公布日2022.11.15

(73)专利权人电信科学技术第十研究所有限公

司

地址710061陕西省西安市雁塔区雁塔西

路6号

GO6F18/23213(2023.01)GO6N3/084(2023.01)

GO6N3/045(2023.01)

GO6N3/0464(2023.01)

(56)对比文件

CN107067025A,2017.08.18CN112115265A,2020.12.22审查员刘晓赛

(72)发明人陈霄鹏

(74)专利代理机构西安凯多思知识产权代理事务所(普通合伙)61290

专利代理师刘涛

(51)Int.CI.

GO6F16/35(2025.01)权利要求书1页说明书4页附图1页

(54)发明名称

一种基于主动学习的开放域小样本文本学习方法

(57)摘要

CN115344696B本发明公开了一种基于主动学习的开放域小样本文本学习方法，首先对小样本文本数据特征编码并初始化小样本模型；再采用主动学习算法获取正确数据集与候选集数据，对候选数据集编码；然后对编码后的候选数据集进行聚类分析，得到最优数目的聚类簇；将最优数目的聚类簇重新聚类，判别出最优簇；进行标注后生成新类别的文本数据以及小样本文本增量数据，将主动学习出的正确数据集、新类别的文本数据、小样本文本增量数据添加至小样本文本数据集；重复执行最终得到充分的文本数据集。本发明将主动学习与小样本学习融合，利用小样本学习的优

CN115344696B

用。

大热

CN115344696B权利要求书1/1页

2

1.一种基于主动学习的开放域小样本文本学习方法，其特征在于，包括如下步骤：

步骤101:小样本文本数据特征编码；

将小样本文本数据集的数据编码成特征向量：如果小样本文本数据的分类模型采用存在预训练模型的分类模型，则使用该分类模型的预训练模型进行特征向量编码；如果小样本文本数据的分类模型不存在预训练模型，则随机编码生成特征向量；

步骤102:初始化小样本模型；

将已经编码的特征向量输入小样本文本数据的分类模型，训练得到小样本模型；

步骤103:获取正确数据集与候选集数据；

将未标注的文本数据通过步骤101的编码方法编码后，输入至小样本模型，通过投票熵主动学习算法得到正确数据集和需要人工标注的候选数据集；

步骤104:候选数据集编码；

将候选数据集通过步骤101的编码方法进行编码；

步骤105:对编码后的候选数据集进行聚类分析；通过多次迭代计算簇的误差平方和，找到误差平方和的拐点，得到最优数目的聚类簇；

步骤106:将最优数目的聚类簇重新聚类，对现有标签的小样本文本数据进行预测，通过寻找预测簇中包含最多已知标签，判别出最优簇；

步骤107:对最优簇进行标注；

步骤108:对最优簇进行判别和标注后标注数据会生成新类别的文本数据以及小样本文本增量数据，将主动学习出的正确数据集、新类别的文本数据、小样本文本增量数据添加至小样本文本数据集；

步骤109:设定重复次数，重复执行步骤101至步骤108;

步骤110:步骤109的重复执行结束后，得到充分的文本数据集。

2.根据权利要求1所述的一种基于主动学习的开放域小样本文本学习方法，其特征在于，所述存在预训练模型的分类模型为BERT模型。

3.根据权利要求1所述的一种基于主动学习的开放域小样本文本学习方法，其特征在于，所述不存在预训练模型的分类模型为TextCNN模型。

4.根据权利要求1所述的一种基于主动学习的开放域小样本文本学习方法，其特征在于，所述聚类分析采用KMeans聚类。

CN115344696B说明书1/4页

3

一种基于主动学习的开放域小样本文