CDH中HDFS、Yarn開啟HA
阿新 • • 發佈:2022-03-14
環境說明:CDH5.16.2 叢集新搭建完成;
接下來準備開啟HDFS、Yarn的HA;
1、進入hdfs元件,在“操作”中啟用HA
HDFS的HA是指NameNode的高可用
2、輸入Nameservice名稱
如果公司有多個叢集,Nameservice名稱不要設定重複了,
Nameservice用來標識由2個NameNode組成的單個HDFS例項;
3、設定新Namenode和JournalNode角色執行的主機
此時已經有一臺NameNode,需要再選一臺主機執行NameNode
JournalNode一般是3個節點
4、設定NameNode和JournalNode的資料目錄
這裡應該可以先建立一個NameNode的主機模板,寫多個目錄,來做資料目錄冗餘
5、隨後等待叢集服務自動重啟
下面這個因為原先的NameNode的目錄已經存在了,不為空,所以告警了,但是不影響,可以繼續操作
6、HA開啟完成
檢視:
二、Yarn開啟HA
Yarn中的HA是指ResourceManager的高可用
1、在yarn元件的“操作”中開啟HA
2、選擇執行備用ResourceManager的主機
3、等待開啟完成,此過程會重啟yarn
檢視: