基于云平台的并行关联规则挖掘算法分析.pdfVIP

2015年6月1日 现代电子技术 Jun.2015 第38卷第11期 ModernElectronicsTechnique Vol.38 No. 11 123 123 基于云平台的并行关联规则挖掘算法分析 穆 俊 （临沧师范高等专科学校 信息科学与技术系，云南 临沧 677000） 摘 要：自云计算技术出现之后，数据挖掘技术取得了突破性发展。数据挖掘系统不仅实现了低成本、高效率运行，并 且系统储存空间和系统可扩展性也在不断扩大，大大提高了数据挖掘效率。这里简要阐述了基于云平台的并行关联规则挖 掘算法分析的研究意义，并对基于Hadoop的数据挖掘系统和数据算法设计进行了详细介绍。 关键词：数据挖掘；关联规则；云平台；Hadoop 中图分类号：TN702⁃34；TP391 文献标识码：A 文章编号：1004⁃373X（2015）11⁃0123⁃03 Analysis ofparallelassociationruleminingalgorithmbasedoncloudplatform MUJun (DepartmentofInformationScienceandTechnology，LincangTeachers’College，Lincang 677000，China) Abstract：A breakthrough development of data mining technologies was acquired after cloud computing technology ap⁃ peared.Thedataminingsystemrealizestheoperationoflowcostandhighefficiency，andexpandssystem’sstoragespaceand scalabilitygradually，sodataminingefficiencyisimprovedgreatly.Inthispaper，researchsignificanceofparallelassociation ruleminingalgorithmbasedoncloudplatformisexpoundedbriefly，dataminingsystemanddataalgorithmdesignbasedonHa⁃ doopareintroducedindetail. Keywords：datamining；associationrule；cloudplatform；Hadoop 随着计算机网络技术、信息技术以及无线通信技术 用价值的信息或者是知识，然后对这些信息或者是知识 在各个领域和各个行业中的应用，数据库也得到了广泛 进行整理和分析的过程[1]。一直以来，在对数据信息和 应用，并且其所积累的数据量也越来越大，几乎都达到 知识进行挖掘的过程中，所采用的都是依靠大规模计算 了TB级，甚至，有一些数据量已经达到了PB级。由于 机和数据挖掘设备对海量数据中的有效信息和知识进 这些数据都相对比较复杂，属于异构结构，并且这些数 行挖掘和分析，这种数据挖掘方式，虽然也能够对数据 据大多有噪声，数据量巨大，所以很难被直接利用。因 信息和知识进行有效挖掘和分析，但是这种数据挖掘方 此，通过高效率、低成本的挖掘方式将有用的数据信息