数据预处理方法在移动通信行业中的应用.pdfVIP

第 20卷 第 ll期 计 算 机 技术 与 发展 V01．20 No．11 2010年 l1月 COMPUTER TECHN0IDGY AND DEVEID PN NT Nov． 20l0 数据预处理方法在移动通信行业中的应用 董 艳 (合肥工业大学 管理学院，安徽 合肥 230009) 摘 要：解决数据本身的质量问题，以某移动通信用户离网原因分析及预测为主题及为数据挖掘模型处理出需要的数据 是文章的主要 目的。文中运用了数据预处理中，维规约，属性集成与构造 ，多重插补 ，离散化 ，规范化，数据抽样等方法来 得到一个完整的、近似真实的数据集。针对所处理数据含有大量缺失值的特点，选取了插补 的方法进行处理。包括方法 的插补方法的选择 ，到最后使用多重插补方法对缺失数据进行修正。预处理后的数据应用到具体数据挖掘模型后提高了 数据挖掘的效率，降低了数据挖掘复杂度。 关键词：数据预处理 ；数据挖掘 ；数据清洗 ；多重插补；缺失值 中图分类号 ：1]P274 文献标识码：A 文章编号 ：1673—629X(2010)11—0225—04 ApplicationofDataPcessingM ethodinM obile Telecommunication Industry DoNG Yan (SchoolofManagement，HefeiUniversityofTechnology，Hefei230009，China) Abstract：Themainpurposeofthearticleissolvingthedataquality．inordertopre—processdatafordatamining modelcustomerchum analysisandpredictionofacertainmobiletelecommunicationindustryasasubject．Themethodusedinthepaperare：dimensionreduc— tion，integrationnadstructuralproperties，multipleimputation，discretization，normalization，datasampling nadothermethodstogeta complete，similra totherealdatasets．Inthispaper，thepmcessingofdataocntaining alragenumberofmissing valuestothecharaeteris— ticsoftheimputationmethodsofrpmcessing．Itisincludingthemethodofimputationmethodofchoicena dusingmultipleimputation methodsform issingdatacorrection． eadtaafterpre—processing appliedtothedatamining modelimpmvetheefficiencyandreduce thecomplexityofdatamining． Keywords：datapre—processing ；datamining ；daatcleaning；multipleimputation；missing value 0 引 言 (2)年龄等其他属性信息作为客户的重要特征信 随着移动通信市场竞争的不断加剧，各大移动通 息 ，只能通过转换其它属性得到。 信运营商都在不断改善 自己的服务水平，加强管理能 (3)由于各种数据挖掘和分析都是面向