1. 程式人生 > >hadoop叢集監控總結

hadoop叢集監控總結

1、取自ResourceManager REST API’s指標;

http://<rm http address:port>/ws/v1/cluster/metrics

http://**.**.***.208:8088/ws/v1/cluster/metrics

叢集節點狀態資訊指標

2、取自hadoop的jmx指標

1、資源使用情況指標

http://**.**.***.208:50070/jmx?qry=Hadoop:service=NameNode,name=NameNodeInfo

http://**.**.***.209:50070/jmx?qry=Hadoop:service=NameNode,name=NameNodeInfo

2、負載情況

http://**.**.***.208:50070/jmx?qry=Hadoop:service=NameNode,name=FSNamesystem

http://**.**.***.209:50070/jmx?qry=Hadoop:service=NameNode,name=FSNamesystem

3、對於每個RPC服務監控指標

"RpcProcessingTimeAvgTime" : ,

"CallQueueLength" : 0

#Hadoop Configurations
#HdfsHead----url
HdfsHead_metrics_url01=http://**.**.***.208:8088/ws/v1/cluster/metrics
HdfsHead_metrics_url02=http://**.**.***.209:8088/ws/v1/cluster/metrics
#getLiveNodeInfo----url
hadoop_getNodeInfo_url01=http://**.**.***.208:50070/jmx?qry=Hadoop:service=NameNode,name=NameNodeInfo
hadoop_getNodeInfo_url02=http://**.**.***.209:50070/jmx?qry=Hadoop:service=NameNode,name=NameNodeInfo
#getload----url-----tag.HAState/tag.Hostname/TotalLoad
hadoop_getload_url01=http://**.**.***.208:50070/jmx?qry=Hadoop:service=NameNode,name=FSNamesystem
hadoop_getload_url02=http://**.**.***.209:50070/jmx?qry=Hadoop:service=NameNode,name=FSNamesystem

參考: