联想大数据分析平台方案.pptx

联想大数据分析平台方案 从2011年，联想启动了大数据平台建设 5年！ 300+研发人员持续投入 全球部署的 超大规模集群 海量数据分析与 持续性业务支撑 300名开发工程师 60名运维工程师 30名数据科学家 全球8个数据中心 2000台服务器 3000名操作用户 12Pb数据容量规模 9Pb数据量 150亿条记录／天 30TB／天 技术融合 深度优化 持续演进 工匠情怀 工业是实体经济的核心，各国积极部署工业4.0 大数据“智慧”贯穿始终，是工业4.0时代企业的核心资产 德国：《工业4.0战略》 美国：《先进制造业国家战略计划》 英国：《英国工业2050战略》 法国：《新工业法国》 © 2016 Lenovo. All rights reserved. 通过各类技术的共同作用，充分把握新工业时代下信息资源带来的机遇，以数据洞察为核心驱动力，贯穿参与者、产品与生产，实现跨界和全球化互联互通的协同，形成集制造和服务为一体的全球化价值网络。 ——《工业4.0白皮书》，IBM全球研究院 海量数据，80%非结构化，给商业分析和价值体现带来的挑战 数据类型 数据结构 数据增长 数据大小 数据明细 数据存储 大数据技术开始替换传统数据仓库，企业商业智能升级 通过诊断型分析，发现企业流程的问题，提出改进建议 通过预测型分析，构建敏捷型企业，快速响应用户需求 标准报告 即席报告 下钻查询 仪表板 记分卡 解析和分割 优化 发生了什么? 问题究竟出在哪里? 数量, 频率, 地点 发生了什么？ 什么是可能发生的最好的？ 为什么会发生? 智能程度 竞争优势 接下来会发生什么? 预测模型 预测 如果这些趋势继续会怎样? 通过跨领域产业互联，结合大数据优化商业运作模式 医疗 旅游 运输 银行 保险 公共事业 互联网 餐饮 政府 零售 征信报告 险种定制和费用优化 企业和产品保险 反欺诈和反洗钱 小额贷款授信 产品在线销售 健康个性化需求 就诊便利举措 疫情监测 景区人流预警 旅游产品推荐 高端人群营销 交通路径规划 竞品分析 社交媒体热点追踪 人流热度和影响分析 用户舆情和突发事件监测 城市规划优化 政务流程优化 餐饮选址 餐饮个性化推荐 产品在线销售 互联网营销 舆情热点追踪 客户留存 高端用户营销 系统监控和优化 制造 产品销售和营销 供应链金融 产品持续改进 联想企业大数据分析平台（LEAP） 提供从大数据采集到商业价值呈现的一体化解决方案 01 数据 04 运维 05 价值 02 平台 03 管理 数据：整合各方数据，沉淀业务知识，LEAP将为客户提供丰富的数据接口与强大的数据资源整合能力。 平台：LEAP将为客户提供安全可靠的分布式的大数据平台，解决了海量数据的计算，存储实时数据计算等问题。 管理：参与到企业运营的各环节，通过对业务数据的分析，发现各种规律趋势，为策略制定提供参考依据。 运维：LEAP提供集中的运维管控组件，实现从设备到服务的全方位监控、管理和扩展。 价值：联想提供端到端的大数据服务，旨在发现数据潜在价值，帮助客户通过大数据解决商业问题，与客户共同成长。 LEAP 联想大数据分析平台（LEAP）全景图 资源开放 分析武库 数据工厂 大数据能力开放平台 Gauss Big Data as a Service 大数据计算平台 Descartes 大数据技术整合与深度优化 大数据分析应用套件 Nash 数据资产管理平台 系统运维监控中心 Euler Architon 软硬件一体化优化，突破计算平台性能瓶颈 批量处理性能 查询性能 实时处理性能 复杂计算 专利的智能调度技术，提升Hadoop计算效能5x~20x 虚拟大数据系统，简化异地数据中心的数据同步 率先支持Spark 2.0，实时性能提升5x 全面支持MPP业务场景，10x优于传统数据仓库 平台性能评测 基于TPC-DS，2016 100%兼容SQL 2003，SQL 99和PL/SQL 动态选择合适的数据源和计算引擎执行查询请求，相对HUE查询性能提升10x 全图形化的任务调度工具，可每日处理上万个独立的数据计算任务 內嵌数据质量校验能力，简化ETL任务的开发工作量 全图形化的计算平台，便捷的大数据系统管理和运维 一站式图形化界面完成大数据集群的安装，升级，系统监控的工作，简化管理 创建各种大数据任务和查询操作全部图形化完成，无需命令行入口 支持丰富的开源扩展，图形化添加近百个高质量组件，全面支持和管理各种大数据业务场景 系统入口 系统监测 任务调度 全图形化的任务调度工具，可每日处理全球来自数百个数据分析人员的上万个独立的数据计算任务 具备灵活多样的部署形态，满足不同规模企业的系统架构 传统数据仓库 大数据平台 新型探索分析 传统分析应用 专业探索分析集市 UNIX小