电力大数据管理平台概要设计概要.docx

大数据平台管理概要设计-v1.02016/3/11修订记录版本号修订日期修订说明创建者审核者引言编写目的编写此概要设计说明书的目的是明确该产品的功能需求与程序设计，为下一步软件开发提供依据。本文档的预期读者：项目经理、技术管理、开发人员。总体描述电科院大数据平台下的平台管理功能模块一期的需求，主要用于大数据平台任务、进程、服务、数据的监控以及集群性能指标的可视化，便于帮助平台的运维工程师进行平台的日常维护与监控。 ，定义列出本文中用到的术语及其缩略语。名词描述功能设计整体功能设计图1：整体功能设计第一阶段集群监控Hadoop集群节点监控仪表盘功能简述提供对Hadoop集群的总体监控信息查看,如集群总内存、总CPU信息、存储等等,如下图所示。集群仪表盘示意图该功能模块涉及到集群中各个资源总量和实时指标的收集，并且基于实时指标与资源总量的占比提供集群状态的提示：0%~70%正常，71%~85%警示，85%以上告警；通过指标显示可查看集群中每个节点资源中占用前十的线程信息功能实现数据来源于ganglia组件，将数据读入elasticsearch搜索引擎服务器，通过页面web请求获取集群总体监控信息，通过点击单台节点，可查询CPU，内存，网络，硬盘，按由高到底查询前10的进程信息机器集群功能简述对Hadoop集群的硬件设备从Cpu、负载、内存、网络、磁盘五个方面进行详细的监控，并以图形化的