ganglia監控技术深入分析.docxVIP

Ganglia的体系结构Ganglia is a scalable distributed monitoring system for high-performance computing systems such as clusters and Grids. It is based on a hierarchical design targeted at federations of clusters. It relies on a multicast-based listen/announce protocol to monitor state within clusters and uses a tree of point-to-point connections amongst representative cluster nodes to federate clusters and aggregate their state. It leverages widely used technologies such as XML for data representation, XDR for compact, portable data transport, and RRDtool for data storage and visualization. It uses carefully engineered data structures and algorithms to achieve very low per-node overheads and high concurrency. The implementation is robust, has been ported to an extensive set of operating systems and processor architectures, and is currently in use on over 500 clusters around the world. It has been used to link clusters across university campuses and around the world and can scale to handle clusters with 2000 nodes。Ganglia是一个分布式的监控工具，用来对Grid和Cluster上面的节点进行监控，利用它提供的web界面可以看到每个节点状态，并且可以输出图形化的表示。 Ganglia 是 UC Berkeley 发起的一个开源监视项目，设计用于测量数以千计的节点。每台计算机都运行一个收集和发送度量数据（如处理器速度、内存使用量等）的名为 gmond 的守护进程。它将从操作系统和指定主机中收集。接收所有度量数据的主机可以显示这些数据并且可以将这些数据的精简表单传递到层次结构中。正因为有这种层次结构模式，才使得 Ganglia 可以实现良好的扩展。gmond 带来的系统负载非常少，这使得它成为在集群中各台计算机上运行的一段代码，而不会影响用户性能。名词说明Metrics- 监控电脑的运行数据，这个词中文比较难翻译，英语中有度量的意思，下文我就不翻译，直接用原词。 Node - 一台电脑，或许拥有多个CPU，中文称之为节点。 Cluster - 一组节点，中文称之为簇。通常节点之间拥有达到G比特的高带宽，簇内通过组播协议，每个节点组播自己的数据，所以每个节点拥有整个簇的状态，这种冗余设计可以提高簇的鲁棒性。一般簇内节点为相同的系统和体系结构，由同一个管理员管理。 Grid - 一组簇，中文可称之为网格。网格的用处是在一个大范围内把各异构的簇通过宽带汇聚在一起。在文献3中，还有一个概念是Planetary-scale systems，也就是全球性的网络，一般部署于主干网的根节点。并且假定，网内的带宽不充裕，而且昂贵，经常有拥塞的情况出现。这是加州伯克利的一个GRID网络： 你可以通过选择Grid或者Cluster来查看各类数据。 Ganglia的各种组成功能名称及配置文件位置 数据采集器名叫gmond（Ganglia Monitor Daemon）的服务程序，配置文件是/etc/gmond.conf位于每个Node上 数据混合收集器名叫gmetad（Ganglia Metadata Daemon）的服务程序，配置文件是/etc/gmetad.conf。它通过轮询收集gmond的数据,并聚合簇的各类信息，然后保存在本地rrdtool的数据库中最好每个cluster都有一个gmetad，以便能构建多级网络 Web可视化工具这是用PHP脚本实现的