基于量化误差与分形理论的高计算效率无监督聚类研究-计算机应用研究.pdfVIP

第３３卷第１０期 计 算 机 应 用 研 究 Ｖｏｌ３３Ｎｏ１０ ２０１６年１０月　 ＡｐｐｌｉｃａｔｉｏｎＲｅｓｅａｒｃｈｏｆＣｏｍｐｕｔｅｒｓ Ｏｃｔ．２０１６ 基于量化误差与分形理论的 高计算效率无监督聚类研究 １ ２ 胡国生 ，杨海涛 （１．广东食品药品职业学院软件学院，广州５１０５２０；２．浙江大学数学学院，杭州３１００２７） 摘　要：已有的矢量聚类算法需学习较多的复杂数据方可获得较好的聚类效果，而对于多维的大数据性能较 弱，为此提出一种基于量化误差与分形理论的高计算效率无监督聚类算法。首先，为数据集建立量化误差的参 数化模型，基于数据集的空间结构获得数据集的率失真曲线；然后通过对率失真曲线的估算，获得数据空间的有 效维度；最终利用分形理论，通过搜索数据集的量化模型参数获得目标数据集的最优类簇数量。实验结果表明， 该量化误差参数化模型可较好地估算数据集的有效维度，同时，本算法对数值型数据集的最优类簇估算与计算 效率优于已有的矢量聚类算法。 关键词：分形理论；量化误差；率失真曲线；无监督聚类；多维数据 中图分类号：ＴＰ３０１６　　　文献标志码：Ａ　　　文章编号：１００１３６９５（２０１６）１０２９１９０４ ｄｏｉ：１０．３９６９／ｊ．ｉｓｓｎ．１００１３６９５．２０１６．１０．００９ Ｑｕａｎｔｉｚａｔｉｏｎｅｒｒｏｒａｎｄｆｒａｃｔａｌｔｈｅｏｒｙｂａｓｅｄｈｉｇｈｃｏｍｐｕｔａｔｉｏｎ ｅｆｆｉｃｉｅｎｃｙｕｎｓｕｐｅｒｖｉｓｅｄｃｌｕｓｔｅｒｉｎｇａｌｇｏｒｉｔｈｍ １ ２ ＨｕＧｕｏｓｈｅｎｇ，ＹａｎｇＨａｉｔａｏ （１．ＳｃｈｏｏｌｏｆＳｏｆｔｗａｒｅ，ＧｕａｎｇｄｏｎｇＦｏｏｄ＆ＤｒｕｇＶｏｃａｔｉｏｎａｌＣｏｌｌｅｇｅ，Ｇｕａｎｇｚｈｏｕ５１０５２０，Ｃｈｉｎａ；２．ＳｃｈｏｏｌｏｆＭａｔｈｅｍａｔｉｃｓ，ＺｈｅｊｉａｎｇＵｎｉ ｖｅｒｓｉｔｙ，Ｈａｎｇｚｈｏｕ３１００２７，Ｃｈｉｎａ） Ａｂｓｔｒａｃｔ：Ｔｈｅｅｘｉｓｔｉｎｇｖｅｃｔｏｒｃｌｕｓｔｅｒｉｎｇａｌｇｏｒｉｔｈｍｎｅｅｄｔｏｌｅａｒｎａｌｏｔｏｆｃｏｍｐｌｅｘｄａｔａｉｎｏｒｄｅｒｔｏｇｅｔａｇｏｏｄｐｅｒｆｏｒｍａｎｃｅｆｏｒ ｃｌｕｓｔｅｒｉｎｇ，ａｎｄｉｔｄｏｅｓｎｏｔｈａｖｅｇｏｏｄｐｅｒｆｏｒｍａｎｃｅｆｏｒｂｉｇｄａｔａ．Ｔｈｉｓｐａｐｅｒｐｒｏｐｏｓｅｄａｑｕａｎｔｉｚａｔｉｏｎｅｒｒｏｒａｎｄｆｒａｃｔａｌｔｈｅｏｒｙｂａｓｅｄ ｈｉｇｈｃｏｍｐｕｔａｔｉｏｎｅｆｆｉｃｉｅｎｃｙｕｎｓｕｐｅｒｖｉｓｅｄｃｌｕｓｔｅｒｉｎｇａｌｇｏｒｉｔｈｍｔｏｓｏｌｖｅｔｈａｔｐｒｏｂｌｅｍ．Ｆｉｒｓｔｌｙ，ｉｔｃｏｎｓｔｒｕｃｔｅｄａｐａｒａｍｅｔｒｉｃｍｏｄｅｌ ｉｎｇｏｆｔｈｅｑｕａｎｔｉｚａｔｉｏｎｅｒｒｏｒｆｏｒｄａｔａｓｅｔ，ｇｏｔｔｈｅｒａｔｅｄｉｓｔｏｒｔｉｏｎｃｕｒｖｅｂａｓｅｄｏｎｔｈｅｓｐａｃｅｓｔｒｕｃｔｕｒｅｏｆｔｈｅｄａｔａｓｅｔ．Ｔｈｅｎ，ｉｔｃｏｍ ｐｕｔｅｄｔｈｅｅｆｆｉｃｉｅｎｔｄｉｍｅｎｓｉｏｎａｌｉｔｙｏｆｔｈｅｄａｔａｓｅｔｂｙｅｓｔｉｍａｔｉｏｎｏｆｔｈｅｒａｔｅｄｉｓｔｏｒｔｉｏｎｃｕｒｖｅ．Ｌａｓｔｌｙ，ｉｔｏｂｔａｉｎｅｄｔｈｅｏｐｔｉｍａｌｃｌｕｓｔｅ ｒｉｎｇｎｕｍｂｅｒｏｆｔｈｅｔａｒｇｅｔｄａｔａｓｅｔｂｙｆｒａｃｔａｌｔｈｅｏｒｙ．Ｅｘｐｅｒｉｍｅｎｔｓｒｅｓｕｌｔｓｈｏｗｓｔｈａｔｔｈｅｐｒｏｐｏｓｅｄｑｕａｎｔｉｚａｔｉｏｎｅｒｒｏｒｍｏｄｅｌｉｎｇｃａｎ ｅｓｔｉｍａｔｅｔｈｅｑｕａｎｔｉｚａｔｉｏｎｅｒｒｏｒｖｅｒｙ