大数据、云计算、物联网关键的技术与未来.ppt

云计算浪潮势不可挡！！ 必须顺应时代的潮流~~ 云计算名称的来源 云计算(Cloud Computing)源自亚马逊公司(Amazon)的EC2(Elastic Compute Cloud)产品和Google-IBM分布式计算项目，这两个项目直接使用了“Cloud Computing”的概念。 平台即服务PaaS（Platform as a service） 平台即服务PaaS（Platform as a service）是提供开发环境、服务器平台、硬件资源等服务给用户，用户可以在服务提供商的基础架构基础上开发开发程序并通过互联网和其服务器传给其他用户。PaaS能够提供企业或个人定制研发的中间件平台，提供应用软件开发、数据库、应用服务器、试验、托管及应用服务，为个人用户或企业的团队协作。 云存储与云服务 云计算的一个主要用途就是存储数据。采用云存储的过程中，数据被存放到多个第三方服务器的存储介质上，而不是像传统的数据存储那样存放在企业的专用服务器上。 云动态地管理可用的存储空间，实际的存储位置可能每天甚至每分钟都不尽相同。尽管位置是虚拟的，用户所看到的数据位置每天都处于相对于观察者的固定状态。 云存储与云服务 通过云计算提供的任何基于web的应用或服务都被称为云服务，它包括从日历和客户关系管理到文字处理和演示的任何应用。 云服务具有诸多优势，如果用户的电脑崩溃，它既不会影响到宿主应用程序，也不会影响到已经打开的文件，并且个人用户可以从任何地点，在任何时间，使用任何智能终端访问他的应用程序和文件。 云计算的特点(缺点) 企业级安全性问题，数据隐私保密 云计算宿主离线 所产生的事故 迫使用户适应新的操作环境、更改使用习惯 网络带宽的局限性问题 云计算实现机制 云用户端：提供云用户请求服务的交互界面，也是用户使用云的入口，用户通过Web浏览器可以注册、登录及定制服务、配置和管理用户。打开应用实例与本地操作桌面系统一样。 服务目录：云用户在取得相应权限（付费或其他限制）后可以选择或定制的服务列表，也可以对已有服务进行退订的操作，在云用户端界面生成相应的图标或列表的形式展示相关的服务。 管理系统和部署工具：提供管理和服务，能管理云用户，能对用户授权、认证、登录进行管理，并可以管理可用计算资源和服务，接收用户发送的请求，根据用户请求并转发到相应的相应程序，调度资源智能地部署资源和应用，动态地部署、配置和回收资源。 监控：监控和计量云系统资源的使用情况，以便做出迅速反应，完成节点同步配置、负载均衡配置和资源监控，确保资源能顺利分配给合适的用户。 服务器集群：虚拟的或物理的服务器，由管理系统管理，负责高并发量的用户请求处理、大运算量计算处理、用户Web应用服务，云数据存储时采用相应数据切割算法采用并行方式上传和下载大容量数据。 用户可通过云用户端从列表中选择所需的服务，其请求通过管理系统调度相应的资源，并通过部署工具分发请求、配置Web应用。 云计算和大数据的关系 本质上，云计算与大数据的关系是静与动的关系；云计算强调的是计算，这是动的概念；而大数据则是计算的对象，是静的概念。 大数据需要处理大数据的能力（数据获取、清洁、存储、统计分析以及数据挖掘等能力），其实就是强大的存储与计算能力；所以可谓是动中有静。如果数据是财富，那么大数据就是宝藏，而云计算就是挖掘和利用宝藏的利器！ 离开云技术海量的存储和天量的计算能力，大数据根本没有才、生存的根基和落地的可能！！！ 物联网应用示意图 云计算关键技术 云计算关键技术 分布式文件系统 并行计算设计和编程模型 统一管理 智能空间管理 资源管理与调度 虚拟化技术 基础 核心 云计算关键技术：计算虚拟化技术 软件与硬件相结合 每台机器上只有单一操作系统 物理硬件逻辑抽象后，软件独立于物理硬件 单台机器上可以有多个操作系统 Unix Windows Linux IBM HP HDS Sun H3C 存储虚拟化平台 服务器 虚拟化平台 存储设备 虚拟存储池 统一不同操作系统和异构存储资源 大容量数据扩容和分区管理 数据自动备份和恢复 统一存储 策略管理 快照 迁移 虚拟计算资源 复制 镜像 云计算关键技术：资源池虚拟化 云计算关键技术：资源管理与调度 建立超大规模集群的资源管理系统，实现透明化的可伸缩计算系统，提高资源的使用效率、发挥计算资源的聚合效能 关键技术 虚拟机生成 虚拟机文件管理（复制、备份） 快速的动态部署技术 资源监控与调度，高效负载均衡 高效迁移技术 故障快速检测与容错技术 高效的资源动态扩展技术 * 镜像文件存储器 部署服务器、监控服务器调度服务器 云计算关键技术：并行计算 传统的并行计算算法复杂，并行规模有限（1024个节点），Ma