Platform MapReduce帮助企业应对“大数据”挑战.docxVIP

PAGE 1 PAGE 1 Platform MapReduce帮助企业应对“大数据”挑战  无论是结构化数据还是非结构化数据，它们在深度与广度上都飞速地增长着，企业能否有效管理并挖掘利用这些数据将打算信息化建设的发展走势。PlatformMapReduce可以帮助企业从容应对“大数据”挑战。  这是一个数据爆炸的时代！IDC在最近的一次调研中，对数据的增长做了一个粗略的估计：到今年年末将有1.8万亿字节的数据存放于50亿个文件中，IDC据此估计，到2015年将产生7.9千万亿兆字节的数据。  数据量太浩大了，即使是最快的IT系统也跟不上收集数据的速度。而全部的这些信息需要筛选、处理并集成，最终进行分析，才能为企业带来价值。因此，如何把这些数据转变成有用信息成为企业亟待解决的问题。  “大数据”问题的由来  一直以来，IT人员都是通过面向批处理的数据仓库架构来供应准时的数据分析，但在今日，随着数据量的激增和新数据类型及其所需的数据处理方法，这种架构已经不堪重负了，这是因为，现有的数据仓库是为结构化数据构建的，非结构化数据并不适合这种架构模式，但实现的状况是：80％的数据是非结构化的。移动和修改海量的非结构化数据将耗费大量的人力物力，因而无法将非结构化数据转换成必要的结构以便利抽取。  除此之外，为了满意新兴的业务需求，I