基于云平台的应用研究+文献综述.docVIP

基于云平台的应用研究+文献综述 云计算作为当前最新的计算机网络技术之一，凭借其强大处理能力、高可拓展性和高性价比，逐渐被应用于各种领域，各大网络服务商也纷纷将云计算服务列入了发展版图。 云计算技术的出现极大的契合了当代数据挖掘发展的技术需求，将云计算融入数据挖掘已经是行业发展的必然趋势，先行者已经在这方便展开了研究。 本论文首先从理论层面上阐述了云计算的定义、层次分析、特点和应用等方面的知识，同时对Google的云计算平台Google App Engine做了详细的介绍；其次在以上理论基础上设计了基于Google App Engine平台的数据挖掘系统，实现了卡通视频检测系统。最后对比了基于Google App Engine云计算平台和本地服务器的程序运行效率，验证了云计算的强大计算和处理能力，以及对于数据挖掘计算的重要性。8339 关键词云计算数据挖掘Google App Engine分类 卡通视频检测 目录 1绪论1 1.1课题研究背景..1 1.1.1数据挖掘的技术需求..1 1.1.2云计算的发展现状2 1.2云计算应用研究现状..4 1.3本文的研究内容.5 2云计算的相关理论和技术7 2.1云计算定义7 2.1.1云计算的定义..7 2.1.2云计算的服务层次分析.8 2.1.3云计算体系结构分析10 2.1.4云计算的关键技术分析..12 2.2云计算应用.14 2.2.1云计算的特点14 5.2本文的不足.46 5.3展望.46 致谢47 参考文献..48 1绪论 1.1课题研究背景 1.1.1数据挖掘的技术需求 我们现在已经生活在一个网络化的时代，通信、计算机和网络技术已经改变 并将继续改变整个人类和社会。如果用芯片集成度来衡量微电子技术，用 CPU 处理速度衡量计算机技术，用信道传输速率来衡量通信技术，那么摩尔定律告诉 我们，它们都是以每 18 个月翻一番的速度在增长。实际上，今天网络的发展速 度已经超越了摩尔定律，全球 IP 网发展速度早在几年前都达到了每 6 个月翻一 番的速度。网络技术的发展就是信息的发展，现在每天在Internet 上传输的数据 量已经很难用某一个单位来衡量了。在这样一个信息爆炸的时代，如何才能不被 信息淹没，而是从中即使发现有用的知识、提高信息的利用率，这已经成为人们 不得不思考的问题。 数据挖掘是人们长期对数据库技术进行研究和开发的结果。 起初各种商业数 据是存储在计算机的数据库中的，然后发展到可对数据库进行查询和访问，进而 发展到对数据库的即时遍历。数据挖掘使数据库技术进入了一个更高级的阶段， 它不仅能对过去的数据进行查询和遍历， 并且能够找出过去数据之间的潜在联系， 从而促进信息的传递。 这些年来，随着计算机网络技术特别是网格计算与云计算的发展，越来越多 的数据分布式的存储在网络中，这些海量的、分布式的、异构的、复杂的数据给 数据挖掘系统的实现带来了两大难题：首先，处理这些数据的复杂度很高，系统 天地，真正的云计算时代开始了。 Google作为云计算的先驱在研究方面树立了很好的榜样，早在2006年以前 就相继发表4篇关于分布式文件系统(GFS)、并行计算(MapReduce)、数据管理 (BigTable)和分布式资源管理(Chubby)的文章，奠定了云计算发展的基础。基于 这些文章， 开源组织Hadoop逐步复制Google 的云计算系统， 从此开始了Hadoop 云计算平台的流行[1] 。2008年，Google又推出了谷歌应用软件搜索引擎（Google App Engine）， 这个开发平台让开发人员可以编译基于Python或是 Java的应用程 序， 并可免费使用Google的基础设施来进行托管， 其最高存储空间可达500MB。 Google App Engine 是一种简化创建、运行和构建伸缩性 Web应用平台。 此外,IBM在2007年推出了ldquo;改变游戏规则rdquo;的ldquo;蓝云rdquo;计算平台，为用户 带来即买即用的云计算平台； 微软于2008年11月推出了 Windows Azure云计算 平台，基于微软全球基础服务系统，由遍布全球的第四代数据中心构成；而亚马 逊(Amazon)使用弹性计算云(EC2)和简单存储服务(S3)为企业提供计算存储服务， 如今云计算已经是亚马逊增长最快的业务之一。此外还有Yahoo、Youtube和 Myspace等众多公司都在云计算领域取得了成功。 我国的云计算发展也非常迅猛。2008年6月，IBM在中国成立了IBM大中 华区云计算中心。同年12月，阿里巴巴签订了计划于2009年初在南京建立首个 ldquo;电子商务云计算中心rdquo;的战略合作框架协议。另外还有其他很多的企业和研究