基于Voronoi和信息熵的空问离群样点检测.pdfVIP

3998 2010，31(18) 计算机工程与设计 ComputerEngineeringandDesign ·软件与算法 · 基于Voronoi和信息熵的空问离群样点检测 王 妍 ， 潘瑜春 H， 王 慧 (1．国家农业信息化工程技术研究中心，北京 100097；2．首都师范大学信息工程学院，北京 100037； 3．北京科络捷通讯产品有限责任公司，北京 100043) 摘 要：为了提高离群点挖掘的效率和准确度 ，在分析了传统离群点挖掘算法优、缺点的基础上，提出一种离群点检测算 法。该算法利用Voronoi确定样点之 间的邻近关系，通过参照邻域范围内其它样点的非空间属性值的信息熵作为离群 因子， 并根据离群因子标识出样点集中的离群点。以北京市大兴区土壤养分为例，实验结果表明，该检测算法能够高效、准确地检 测出土壤样点中的离群点。 关键词：空间离群点；离群点检测；泰森多边形；信息熵；离散化 中图法分类号：TP3l1 文献标识码：A 文章编号：1000．7024(2010)18-3998．03 Basedonvoronoiandinformationentropyspatialoutliersdetectionalgorithms WANGYan ， PAN Yu—chunH， WANGHui (1．NationalEngineeringResearchCenterforInformationTechnologyinAgriculture，Beijing100097，China； 2．InstituteofInformationEngineering，CapitalNormalUniversity,Beijing100037，China； 3．BeijingCoreLogicCommunicationCoLtd，Beijing100043，China) Abstract：Inordertoenhancetheoutliermmmgefficiencyandaccuracy, soiloutliersdetectionalgorithm basedonVoronoiandinfor- marionenrtopyisproposedafteranalyzingtheadvantagesanddisadvantagesoftheclassicaloutlierminingalgorithmsatfirst．Thealgo· rithm calculatesinformationen~opyofnon-spatialattributeastheoutlierfactorbyVoronoineighborhoodwithoutparameters．Taking soilnutrientinDaxingdistrictasanexample，experimentalresultsshowthattheproposedalgorithm outperfomr sotherexistingalgorithms indetectionaccuracy,userdependencyandefficiency． Keywords：spatialoutliers；outlierdetection；Voronoi； informationentropy；discretization 定的不便并增大了算法的复杂度。鉴于此，曲吉林提出了基 O 引 言 于Voronoi图的异常检测算法 ，由于邻域确定是决定离群点 空间离群点是指根据其空间位置和空间关系确定空间邻 检测算法时间复杂度的关键步骤，在该算法中通过Voronoi图 域内，与其邻居样点在非空间属性上有 明显不 同的空间对象； 来确定待检测对象的邻域，这样做就避免了输入参数k的所 而且它们是局部离群的。空间离群点检测在交通、气象以及 带来的麻烦，最终导致算法的时间复杂度从O(dN)降低到O 基于空间位置的服务等很多方面有着非常广泛的应用。 (NlogN)。然而该算法的缺陷是