曙光数据分析应系统.docxVIP

数据分析应用系统介绍曙光XData大数据支撑平台8.1.1 概述曙光XData-Hadoop是基于开源社区的Hadoop来构建的。开源社区提供了一个能够对海量数据进行分布式处理的软件框架，为处理多样化数据提供了一个超越传统存储和数据处理的解决方案，已经成为构建企业大数据架构的主流选择。曙光XData-Hadoop包含了开源社区的主要组件及其生态圈中的主流组件，并对这些组件在高可用性、安全、易管理、性能方面进行了大量的优化，让企业可以更快、更准、更稳的从各类繁杂无序的海量数据中洞察商机。曙光XData-Hadoop的构成如图所示。曙光XDATA-HADOOP的构成曙光XData-Hadoop系统是一个分布式数据处理系统。对外提供大容量的数据存储分析和查询能力，主要包括以下特征：?√ 经过客户验证的企业级Hadoop版本，稳定可靠；?√ 具有图形化安装、管理、监控工具，自动进行集群配置优化；?√ 快速地存储、整合和管理不同类型的大容量数据；基于分布式批处理框架，将输入的数据集划分为块后并行处理、排序、再归集，可处理PB级别的数据；?√ 基于丰富的Hadoop领域经验，构建高性能的参数优化； √ 在开源的Hadoop之上，全面支持Apache Flume、Apache Kafka、Apache Sqoop 、Stom、Spark等开源软件。8.1.2 Hadoop的概述与发展史Hadoo