华为云大数据解决方案 .ppt

华为云大数据解决方案 1.大数据背景与用户需求 1.1 大数据背景介绍 根据IDC的报告，未来十年全球大数据将增加50倍。管理数据仓库的服务器的数量将增加10倍以便迎合50倍的大数据增长。 毫无疑问，大数据将挑战企业的存储架构及数据中心基础设施等，也会引发云计算、数据仓库、数据挖掘、商业智能等应用的连锁反应。2013年企业会将更多TB级(1TB=1000GB)数据用于商务智能和商务分析；到2020年，全球数据使用量预计暴增44倍，达到35.2ZB (1ZB=10亿TB)。 1.2 企业应用大数据的需求 大数据有着4“V”特性：Volume、Variety、Velocity、Value。要把握大数据，挖据出大数据中的价值，从技术的角度来说，两个问题需要解决：数据的存储，数据的分析。大数据的Volume 属性——“海量数据”一词从七十年代延展至今，正在发生从量变到质变的飞跃。所谓质变是说，从来没有一个时期要如此依赖数据。同时，传统的数据处理和数据管理技术正在受到当今“海量数据”的直接挑战。 （一） ZB级的数据管理和数据分析，不是传统的IT服务器、磁带、纵向扩展设备能够承载的，数量级和复杂程度到达一个层级，引导企业进行信息化技术和企业业务的革新。 （二） 世界经济形势趋紧，高额的IT预算，究竟应该在哪里投入。据调查企业目前73％的预算都用在基本业务运转上，剩下的才对商业运营有支撑作用。CIO的苦痛在于IT设施不断的膨胀，仅仅是因为业务的数量涨了，没有给企业经营带来真正的增值。 （三） 据统计，ZB级的数据中，80%以上是半结构化，非结构化数据。为了应对“大数据”浪潮，很多企业在具备一定结构化处理能力的基础上，将非结构化数据依托给了Hadoop。但当深入探索之后，有投资人给出了这样的感受——使用Hadoop构建分析性查询，会变成类似用锤子来建造房屋的活动：特定的数据模式分析任务中性能低的可怕；高昂的后期开发和维护任务成本；以及企业信息孤岛、数据单点故障。 企业应用大数据，无法按开放架构重建所有设施，互联网与传统行业面临着如下问题，如何整合双方优势是企业应用大数据关键。 2 华为云海量数据分析解决方案 2.1 大数据整体架构及应用领域 2.2 弹性计算云实现大数据计算分析 多种配置灵活应对大数据计算高并发、高内存的需求 快速部署弹性伸缩应对突发的波峰波谷 华为弹性计算云整合了计算、存储与网络资源，按需使用、按需付费的一站式IT计算资源租用服务，以帮助开发者和IT管理员在不需要一次性投资的情况下，快速部署和管理大规模可扩展的IT基础设施资源。 企业可以通过基于浏览器的、图形化界面的云计算管理平台，足不出户实现按需、自助开通、部署、控制和管理大规模的IT基础设施，并拥有对这些基础设施的完全控制权限。 2.3 云存储满足海量数据的存储 按需使用的海量存储空间成本更低 多元化的API接口、用户鉴权和安全控制保证数据的安全 华为云存储通过融合的方案、分析、备份和归档，提供海量低廉按需的存储服务，解决了信息孤岛，也解决了随着业务的发展，对量和性能不断拔高的需求；同时，又能根据需求的变化对容量和性能进行扩容,保持低廉的TCO。 基于对象的云存储服务，为客户提供海量、安全、高可靠、低成本的数据存储能力。 客户可以通过REST接口或者基于web浏览器的云管理平台界面对数据进行管理和使用。同时，我们提供了多种语言（java、php、c、Python）的SDK来简化编程。 3 方案特性 1. 定制化镜像，弹性供应、快速部署 免去了服务器上架的烦恼，弹性计算云可以在十分钟内部署您所需要的操作系统以及软件部署并且完成服务上线，随时增加和缩减IT基础设施规模，实时满足业务发展的需要。 2. 弹性计算产品与物理设备的组网架构 弹性计算云和传统服务器托管在同一个VLAN 基于华为云数据中心中，实现弹性计算云于传统服务器托管在同一个VLAN中。这种架构非常的灵活，既满足了资源的快速扩展同时也保证了性能。 3. 华为云与企业内网的安全通道，远程管理和维护 可以通过在线客户可视化的Web界面，允许客户在线自助申请、开通、配置、监控、管理等对一次开通多台弹性计算产品并分配不同的用途，进行自助多层次组网并进行架构部署，以便快速对客户提供服务。 同时，选择华为云即可享受免费的7*24免费技术支持服务，客户可以通过电话、邮件等方式第一时间得到支持。 4. 按需使用节省成本、安全可靠 采用弹性计算云，可以缩短新应用上线的时间，大幅降低用户的CAPEX，节省大量带宽以及综合运维成本。华为弹性计算云提供了很多机制充分保障您的计算资源的安全性，多数据中心集群架构设计，从网络接入到管理配备7层安全防护,采用SAS磁盘、RAID技术、系统卷快照备份、动态迁移能力、相互隔离的计算