大数据培训hadoop要点分析.ppt

* HDFS文件体系metric dfs.FSNamesystem.BlockCapacity block的总容量 dfs.FSNamesystem.BlocksTotal block的当前容量 dfs.FSNamesystem.CapacityRemainingGB HDFS文件体系残剩的容量 dfs.FSNamesystem.CapacityTotalGB HDFS文件体系总体容量 dfs.FSNamesystem.CapacityUsedGB HDFS文件体系已应用的容量 dfs.FSNamesystem.CorruptBlocks 已破坏的block数量 dfs.FSNamesystem.ExcessBlocks 多余的block dfs.FSNamesystem.ExpiredHeartbeats 超时的心跳 dfs.FSNamesystem.FilesTotal 文件总数 dfs.FSNamesystem.LastCheckpointTime 比来一次做checkpoint的时候 dfs.FSNamesystem.LastWrittenTransactionId 比来一次写入的transactionid dfs.FSNamesystem.MillisSinceLastLoadedEdits 间隔上一次加载edit的时候 dfs.FSNamesystem.MissingBlocks 丧失的block数量 dfs.FSNamesystem.TotalFiles 文件总个数 dfs.FSNamesystem.UnderReplicatedBlocks 副本个数不敷的block dfs.FSNamesystem.PendingDataNodeMessageCount datanode的恳求被queue在standby namenode的个数 dfs.FSNamesystem.PendingDeletionBlocks 未被验证的block个数 dfs.FSNamesystem.PendingReplicationBlocks 守候被备份的block个数 dfs.FSNamesystem.PostponedMisreplicatedBlocks 被推迟处理惩罚的错误备份的block个数 dfs.FSNamesystem.ScheduledReplicationBlocks 排定要备份的block个数 dfs.FSNamesystem.TotalLoad namenode的Xceiver个数 dfs.FSNamesystem.TransactionsSinceLastCheckpoint 从前次checkpoint起到如今新的transcation的个数 dfs.FSNamesystem.TransactionsSinceLastLogRoll 从前次roll editlog起到如今新的transcation的个数 * map/reduce参数监控metrics mapred.ShuffleMetrics.ShuffleConnections shuffle的连接数 mapred.ShuffleMetrics.ShuffleOutputBytes shuffle输出数据大小 mapred.ShuffleMetrics.ShuffleOutputsFailed shuffle失败的次数 mapred.ShuffleMetrics.ShuffleOutputsOK shuffle成功的次数 yarn（map/reduce v2）参数监控metrics yarn.NodeManagerMetrics.AllocatedContainers 当前分派的container个数 yarn.NodeManagerMetrics.AllocatedGB 当前分派的container内存 yarn.NodeManagerMetrics.AvailableGB 当前free的内存 yarn.NodeManagerMetrics.ContainersCompleted 完成状况的container个数 yarn.NodeManagerMetrics.ContainersIniting 初始化状况的container个数 yarn.NodeManagerMetrics.ContainersKilled killed状况的container个数 yarn.NodeManagerMetrics.ContainersLaunched 启动态的container个数 yarn.NodeManagerMetrics.ContainersRunning 运行态的container的个数 yarn 集群metrics yarn.ClusterMetrics.Nu