深度解析大数据技术解决方案.pdf

深度解析大数据技术解决方案 技术创新，变革未来 目录 1 大数据概述 2 大数据平台介绍 3 案例分享 4 通用电气大数据应用 大数据概述 数据大爆炸的时代 45倍 大数据的4V特征 非结构化数据 实时分析 大数据技术发展现状 大数据与工业4.0 在工业4.0中大数据变身“智能数据”，随着传 感器之类的设备的广泛应用，现代生产设施产 生的数据也越来越多，企业收集这些数据并把 这些数据转换成有意义的信息并最终帮助企业 优化产品和提高生产力。 大数据分析平台简介 企业大数据之旅 获得数据 存储数据 挖掘和分析数据 1 3 5 2 4 6 汇集数据 运算数据 使用数据 大数据分析平台层次 分布式存储架构概述 分布式存储架构特点： ⚫ 横向扩展能力强，处理能力 线性增长； ⚫ 能够处理结构化、半结构化、 非结构化数据； ⚫ 有效支撑百亿数据量、PB级 数据实时查询； ⚫ 能够针对全量数据进行数据 挖掘和机器学习； 集中存储架构 分布式存储架构 Hadoop与大数据 Hadoop的主要用途 数据挖掘改善BI 3 6 13 降低数据分析成本 3 5 日志分析、Web搜索 百分比