Google 云计算技术架构.docxVIP

Google 云计算技术架构: Google 云计算技术架构应用均依赖于四个基本组件 1.分布式文件存储(GFS),2,并行数据处理模型(MapReduce).3 分布式锁(Chubby).4, 结构化数据表(BigTable). Chubby 的作用:1.为GFS 提供锁服务,选择Master 节点:记录 Master 的相关描述信息;2:通过独占锁记录Chunk Server 的活跃情况 ;3: 为 BigTable 提供锁 服务, 记录子表信息 ( 如子表文 件信息, 子表分类信息 , 子表服务信 息);4:记录MapReduce 的任务信息;5:为第三方提供锁服务与文件存储. GFS 的作用:1.存储 Bigtable 的子表文件,2:为第三方应用提供大尺寸文件存储功能;3:文件读操作流程(API 与 Mater 通信,获取文件元信息,根据指定的读取位置与读取长度 ,API 发动兵发起操作,分别从若干 ChunkServer 上读取数据,API 组装所得数据,返回结果. BigTable 的作用:1.为 Google 云计算应用(或第三方应用)提供数据结构化存储功能;2:类似于数据库;3:为应用提供简单数据查询功能(不支持联合查询);4:为 MapReduce 提供数据源或者数据结果存储. BigTable 的存储于服 务请求的 响应:1. 换分为子表存储 , 每一个子表对应一个子 表文件, 子表文件存储 于 GFS 上;2:bigTable 通过元数据组织子集;3:每个子集都被分配给一个子表服务器;4:一个子表服务器可同时分配多个子表;4: 子表服务器负责对外提供服务,响应查询请求. MapReduce 的作用:对 BigTable中的数据进行并行计算处理;2 使用 BigTable 或者 GFS 存储计算结果 Google Analytics:免费的企业级网络分析解决方案;2:帮助企业了解网站流量和营销效果;3:能以灵活的反噬(各类报表)查看并分析流量数据 Google 网站流量分析的基本功能:统计网站的基本数据,包括会话,综合浏览量,点击量和字节流量;2:分析网站页面关注度,帮助企业调整或者增删页面;3:分析用户浏览路径,优化页面布局;4:分析用户访问来源连接,提供广告投资回报;5: 分析用户访问环境,帮助美化页面 EC2:Eastic Compute Cloud)简言之,EC2 就是一部具有无限采集能力的虚拟计算机,用户能够用来执行一些处理任务EC2 的主要特征:1:灵活性,可以自行配置的实例类型,数量,还可以选择实例运行的地理位置,可以根据影虎的需求随时改变实例的使用数量;2:低成本:SSH,可配置的防火墙机制,监控等;3: 易用性:用户可以根据亚马逊提供的模块自由构建自己的应用程序,同时 EC2 还会对用户的服务请求自动进行负载均衡;3:容错性,弹性 IP 简单队列服务 SQS:目标:解决低耦合系统间的通信问题,支持分布式计算机系统之间的工作流, 简单队列服务 SQS:特点:简单,无处不在 简单队列服务 SQS:的机制:冗余存储,给予加权随机分布的消息取样,并发管理和故障排除,消息的可见性超时值与生命周期 SDB 与 S3 的区别:S3 是专为大型,费结构化的数据块设计的;SimpleDB是为复杂的,结构化数据建立的,支持数据的查找,删除,插入等操作