云计算下数据挖掘平台架构及其关键技术的探索.pdf

科技与创新 ┃ScienceandTechnology Innovation 2017 年 第 6 期 文章编号：2095 6835 2017 06 0128 02 － （ ） － － 云计算下数据挖掘平台架构及其关键技术的探索 刘建东 （吉首大学张家界学院，湖南 张家界 427000 ） 摘 要：云计算作为一种新型的信息化计算技术，已经被很好地应用于现阶段的生活当中，而随着大数据时代的不断推 进，“数据挖掘”成为了当下的一个研究重点。借此，立足于信息化时代背景，对云计算下数据挖掘平台架构及其关键技 术进行了深入的研究。 关键词：云计算；数据挖掘；平台架构；分布式存储技术 中图分类号：TP311.13 文献标识码：A DOI ：10.159 13/j .cnki.kj ycx.2017.06.128 伴随着改革开放的不断深入，我国进入 世纪之后，综合 是一个数据挖掘云服务层。 2 1 国力有了全面的提升，无论是经济方面，还是科技方面，都取 2.1 云计算支撑平台 得了很大的进步与发展。我们希望可以通过不断地发展经济与 简单来说，云计算的支撑平台其实是云计算技术支撑平台， 科技来使社会发展获得更大的动力。经济全球化的大趋势在不 云计算的支撑平台将会为数据挖掘平台提供分布式的数据存储 断推动社会发展的同时也使我国迈进了信息化时代，而信息化 技术、分布式计算技术、数据库存储技术和必要的云计算技术。 的不断深入又使得大数据时代“如期而至” 。云计算凭借其高强 2.2 数据挖掘能力层 的存储能力与计算能力受到更多人的青睐。因此，对云计算下 数据挖掘能力层主要提供的能力是数据挖掘的基础能力， 数据挖掘平台架构及其关键技术的探索有着鲜明的现实意义。 其中包含算法服务管理能力、调度能力、数据并行框架处理能 1 数据挖掘技术与云计算技术研究 力和数据挖掘的云服务能力。同时，这个层次拥有相关的第三 1.1 数据挖掘技术 方挖掘工具的接入。这在设计过程当中是被允许的，例如Weka、 所谓的“数据挖掘技术” ，主要是针对数据研究的一种新型 Mathout 等相关的分布式法库就是第三方的挖掘工具。 技术。随着计算机网络技术的发展与移动互联技术的普及，现 2.3 数据挖掘云服务层 阶段生活当中，每天基于网络环境所产生的虚拟数据已经十分 数据挖掘云服务层主要是提供数据挖掘的云服务，其中， 庞大。在大数据的时代背景之下，数据挖掘技术应运而生。而 服务能力的封装接口样式可以是多种多样的，例如简单常见的 所谓的“数据挖掘技术” ，其主要的研究对象便是众多的数据， Webservice 等。在这个平台当中，可以根据不同类型的服务问 工作内容便是在众多的数据当中 挖掘 出对自身有用的知识信 题，为数据业务配置、组装相应的数据挖掘云服务。 “ ” 息，然后加以利用。笔者习惯将这一过程看作一个“废物利用” 3 云计算下数据挖掘平台关键技术研究 的过程，其研究的范围将会涉及到人工智能等高尖端领域，而 3.1 分布式存储技术 其内部的技术包括预测分析等。 分布式存储技术主要被应用于数据挖掘当中，因为在对数 1.2 云计算技术 据进行“挖掘”的过程当中需要应用到分布式存储技术。而分布 云计算技术可以说是信息化的必然产物，但是其一经出现 式的存储技术在很大层面之上主要应用的是分布式存储系统。 便被广泛地应用于企业发展之中，尤其是企业内部的财务管理， 这种存储方法可以实现对大容量数据的存储，并且在存储的过