非平衡数据集分类方法的研究及其在电信行业中应用.pdfVIP

摘要 摘 要 近年来，非平衡数据集分类问题一直是数据挖掘和机器学习领域的研究难 点．所谓非平衡数据集分类问题，是指训练样本数量存在类分布不平衡的模式 分类问题．在许多实际问题中，数据集是非平衡的，即某些类的样本量比其他 类少得多。当使用传统的机器学习算法来解决该问题时，往往会出现少数类的 预测准确率大大低于多数类的情况，从而导致分类器性能大幅度下降．本论文 针对非平衡数据集分类困难的问题，尤其是少数类识别困难问题，提出一种新 成新样本点的过抽样技术．同时，在研究电信数据集特点和非平衡数据集分类 方法的基础上，针对电信数据挖掘的常用主题——欠费挖掘，对电信欠费预测 做了深入的研究和探讨．论文的主要研究工作如下： 1．针对非平衡数据集分类问题，本文提出一种新的算法 本的过抽样技术．在新算法中，以支持向量机为元分类器，每次boosting迭代 中标记出错分的样本点，然后在错分样本点与其近邻样本间随机产生一定数量 与错分样本点同一类另4的新样本点．新产生样本点加入原训练集中重新训练学 中的对少数类和多数类具有较高的预测准确率。 2．针对电信欠费数据挖掘本身的特点，结合电信行业专家经验，提出一种 处理电信欠费数据集的分类策略，并应用于实际电信数据，取得了一些有价值 的结果。 关键词：电信、数据挖掘、电信欠费、非平衡数据集、海量数据、支持向量机， 提升 Abstract Abstract isa datawithimbalancedclassdistribution Inrecent of years，classification sets taskindata andmachine imbalanceddata difficult mining learning．The classdistribution． ofdatawithimbalanced classificationisthe classification pattem datasetsare classes In real．world imbalanced，thatis，some many problems，the machine traditional muchlessinstancesthanothers．When learning have using the rateofthe classis tosolve predictionaccuracy minority algorithms problem，the lowerthanthatofthe to declinein class，leadingsig