大資料平臺監控介面和報表
阿新 • • 發佈:2020-12-16
技術標籤:BigData
頁面展示
1.開啟網站 http://主機名:8088/cluster/nodes 頁面可以檢視大資料平臺的狀態彙總資訊。 2.通過介面檢視Hadoop狀態 (主選單包括 狀態總覽,資料節點,掛載失敗節點,快照,日記等) http://主機名:50070 (1)Overview(總覽),檢視 Hadoop 啟動時間、版本號、 命名節點日誌狀態、命名節點儲存狀態等資訊; (2)Datanodes(資料節點),檢視正在執行、停止執行的資料節點資訊; (3)DataNode Volume Failures(資料節點掛載失敗),檢視掛載失敗的資料節點; (4)Snapshot(快照),檢視快照建立、刪除的資訊; (5)Startup Progress(啟動程序),檢視啟動程序資訊; (6)Browse The File System(檔案系統瀏覽),檢視 HDFS 中的檔案和資料夾; (7)Logs(日記),檢視 Hadoop 的命名節點、資源管理等日誌
通過介面監控大資料平臺資源狀態
1.通過介面監控 YARN 的狀態 登入 http://主機名:8088 2.檢視 MapReduce 執行日誌 (注意,檢視mapreduce日誌需要先啟動 jobhistory 程序 cd /hadoop的路徑/sbin ./mr-jobhistory-daemon.sh start historyserver ) 登入 http://主機名:8088/logs/ 3.檢視 MapReduce 執行狀態 登入 http://主機名:8088/cluster
通過介面監控HDFS狀態
1.檢視HDFS狀態 登入 http://主機名:50070 點選 Utilities-->Browse The File Systerm 2.HDFS 開啟資料夾 在位址列中輸入 hbase名稱 點選 Go! 按鈕(或者直接回車) 3.下載 HDFS 中的檔案 點選要下載的檔名 再出現的對話方塊中 Download 4.通過介面監控Hbase 的狀態 HBase 使用者介面主頁 (HBase 的使用者主介面選單有 Table Details(表資訊)、 Local Logs(本地日誌)、 Log Level(日記等級)、Debug Dump(除錯轉儲)、 Metrics Dump(指標轉儲)、HBase Configuration(HBase 配置) dxc http://主機名:60010 dxc2 http://dxc2:60010 dxc3 http://dxc3:60010 Region Servers(區域伺服器群)中可以檢視主機狀態、記憶體、請求、儲存檔案和壓縮情況等; 列表中共有三臺主機,主機名分別為 dxc、dxc2 和 dxc3 如點選 dxc 主機,可以檢視該主機詳細指標資訊, 檢視 HBase 裡面的表資訊,點選的選單欄 Table Details 可檢視所有表資訊 在 Tables 中點選 System Tables 檢視系統表,主要是元資料、名稱空間,