十四.大資料平臺監控介面和報表
阿新 • • 發佈:2022-05-26
十四、大資料平臺監控介面和報表
監控大資料平臺執行狀態
檢視大資料平臺狀態
http://master:8088/cluster/nodes 或 http://10.10.10.128:8088/cluster/nodes
檢視Hadoop狀態
http://master:50070 或 http://10.10.10.128:50070
!
(1)Overview(總覽),檢視 Hadoop 啟動時間、版本號、命名節點日誌狀態、命名節 點儲存狀態等資訊; (2)Datanodes(資料節點),檢視正在執行、停止執行的資料節點資訊; (3)DataNode Volume Failures(資料節點掛載失敗),檢視掛載失敗的資料節點; (4)Snapshot(快照),檢視快照建立、刪除的資訊; (5)Startup Progress(啟動程序),檢視啟動程序資訊; (6)Browse The File System(檔案系統瀏覽),檢視 HDFS 中的檔案和資料夾; (7)Logs(日記),檢視 Hadoop 的命名節點、資源管理等日誌。
1、OverView(概況)
序號 | 引數項 | 資訊內容 |
---|---|---|
1 | Stared(啟動時間) | 2022.05.25 11:37:43 |
2 | Version(版本號) | Hadoop 的版本號為 2.7.1 |
3 | Compiled(編譯) | 2015-06-29T06:04Z by jenkins from (detached from 15ecc87) |
4 | Cluster ID(叢集 ID) | CID-656eb3c3-6a82-4a10-8ef8-871f39f749eb |
5 | Block Pool ID(資料塊池 ID) |
BP-2070913520-192.168.1.6-1587617240295 |
2.Summary(概要)
在 Summary 中的結果顯示,Security(安全狀態)和 SafeMode(安全模式)處於關閉狀 態;HDFS 的 Configured Capacity(儲存空間配置)容量為 73.95GB,空閒空間(DFS Remaining) 為 68.96 GB;還顯示了名稱節點日誌狀態(Journal Manager State)和名稱節點儲存 (NameNode Storage)的具體路徑等。
監控大資料平臺資源狀態
監控YARN的狀態
檢視MapReduce執行日誌
http://master:8088/logs 或 http://10.10.10.128:8088/logs
[hadoop@master ~]$ cd /usr/local/src/hadoop/sbin/
[hadoop@master sbin]$ ./mr-jobhistory-daemon.sh start historyserver
starting historyserver, logging to /usr/local/src/hadoop/logs/mapred-hadoop-historyserver-master.example.com.out
監控HDFS狀態
http://master:50070 或 http://10.10.10.128:50070 訪問 HDFS檔案系統,點選 Utilities-->Browse The File Systerm