大数据平台分析报告.pdfVIP

密级：内部公开 环境数据中心 大数据平台分析 Big data platform analysis 聚光科技（杭州）股份有限公司 内部资料 注意保密 目 录 1. 大数据背景1 1.1. 什么是大数据1 1.2. 发展现状1 1.3. 大数据的应用2 2. 大数据平台介绍4 2.1. 定位4 2.1.1. 产品概述4 2.2. 功能4 2.3. 设计4 2.4. 技术错误！未定义书签。 2.5. 总结4 3. 环境数据中心5 3.1. 背景定位5 3.2. 功能5 3.2.15 3.2.2错误！未定义书签。 3.3. 设计6 3.4. 技术错误！未定义书签。 4. 总结6 I 内部资料 注意保密 1.大数据背景 1.1.什么是大数据 大数据最早在上世纪90年代被提出，是指无法在一定时间内用常规软件工 具对其内容进行抓取、管理和处理的数据集合。 现在，业界普遍认同所谓“大数据”具有明显的“3V 特征”：量级（Volume ）， 速度（Velocity）和多样性（Variety）。大数据普遍具有量级大，要求处理速度 快，数据本身具有丰富的多样性。在甲骨文公司和中国移动研究院的相关研究 文档里，都追加了第四个 V——Value，价值；而IBM 在其相关文档中给出的 第四个“V ”则是真实性（Veracity)。 大数据的价值：在海量的规则或不规则数据之中，用新的数据处理手段， 以很快的速度计算或分析出潜在规律性、根本性的判断、趋势或预见。 1.2.发展现状 随着移动互联网的带宽的增加和智能设备销售量的上升，互联网业迎来了 “云计算”和“大数据”。世界经济论坛一份有关大数据的研究报告称，每天全 球几十亿人使用计算机、GPS 设备、电话和医疗设备，产生海量的数据信息。 这些用户大部分来自发展中国家，他们的需求和习惯尚未被真正理解，如果能 够借助大数据相关技术分析和挖掘数据背后的信息，将有助于认识需求、提供 预测和防范危机。 大数据的真正意义并不在于大带宽和大存储，而在于对容量大且种类繁多 的数据进行分析并从中萃取大价值。采用大数据处理方法，生物制药、新材料 研制生产的流程会发生革命性的变化，可以通过数据处理能力极高的计算机并 行处理，同时进行大批量的仿真比较和筛选，大大提高科研和生产效率。数据 已成为矿物和化学元素一样的原始材料，未来可能形成“数据探矿”、“数据化 学”等新学科和新工艺模式。大数据处理的兴起也将改变云计算的发展方向， 云计算正在进入以AaaS （分析即服务）为主要标志的Cloud 2.0 时代。 - 1 - 内部资料 注意保密 1.3.大数据的应用 大数据的开发与应用有着三个特点： 1、数据样本，不再是抽样，而就是数据的总体。分析数据是把所有搜集到 的数据包括在内。 2、数据不必百分之百地准确，不必剔除特例，而是从“海量”的数据中总 结出绝大部分人的共同特性。用“