第一步：由於Hdoop HA叢集中沒有SecondaryNameNode 因此要先刪除hadoop目錄下的masters檔案

在所有機器上輸入rm -rf /usr/local/hadoop/masters

第二步：刪除之前的非高可用hadoop叢集產生的資料檔案

第三步：在master上修改hadoop目錄下的配置檔案hdfs-site.xml

完整的配置檔案如下：

19 <configuration>
 20 <property>
 21   <name>dfs.nameservices</name>
 22   <value>kevinwong</value>
 23 </property>
 24 
 25 <property>
 26   <name>dfs.ha.namenodes.kevinwong</name>
 27   <value>master,slave3</value>
 28 </property>
 29 
 30 <property>
 31   <name>dfs.namenode.rpc-address.kevinwong.master</name>
 32   <value>master:8020</value>
 33 </property>
 34 
 35 <property>
 34 
 35 <property>
 36   <name>dfs.namenode.rpc-address.kevinwong.slave3</name>
 37   <value>slave3:8020</value>
 38 </property>
 34 
 35 <property>
 36   <name>dfs.namenode.rpc-address.kevinwong.slave3</name>
 37   <value>slave3:8020</value>
 38 </property>
 39 
 40 <property>
 41   <name>dfs.namenode.http-address.kevinwong.master</name>
 42   <value>master:50070</value>
 43 </property>
 44 
 45 <property>
 46   <name>dfs.namenode.http-address.kevinwong.slave3</name>
 47   <value>slave3:50070</value>
 48 </property>
 49 
 50 <property>
 51   <name>dfs.namenode.shared.edits.dir</name>
 52   <value>qjournal://slave1:8485;slave2:8485;slave3:8485/shareedits</value>
 53 </property>
 54 
 55 <property>
 56   <name>dfs.client.failover.proxy.provider.kevinwong</name>
 57   <value>org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider</value>
 58 </property>
 44 
 45 <property>
 46   <name>dfs.namenode.http-address.kevinwong.slave3</name>
 47   <value>slave3:50070</value>
 48 </property>
 49 
 50 <property>
 51   <name>dfs.namenode.shared.edits.dir</name>
 52   <value>qjournal://slave1:8485;slave2:8485;slave3:8485/shareedits</value>
 53 </property>
 54 
 55 <property>
 56   <name>dfs.client.failover.proxy.provider.kevinwong</name>
 57   <value>org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider</value>
 58 </property>
 59 
 60 <property>
 61   <name>dfs.ha.fencing.methods</name>
 62   <value>sshfence</value>
 63 </property>
 64 
 65 <property>
 66   <name>dfs.ha.fencing.ssh.private-key-files</name>
 67   <value>/root/.ssh/id_dsa</value>
 68 </property>
 69 
 70 <property>
 71   <name>dfs.journalnode.edits.dir</name>
 72   <value>/opt/journalnode</value>
 73 </property>
 74 

 75 </configuration>

第四步：在master上修改hadoop目錄下的配置檔案core-site.xml

第五步：啟用active NameNode的自動切換

在master上修改hadoop目錄下的配置檔案hdfs-site.xml 加入以下內容：

修改hadoop目錄下的配置檔案core-site.xml 加入以下內容：

第六步：將master上hadoop的配置檔案拷貝到slave1 slave2 slave3上

第六步：在slave1 slave2 slave3分別上啟動JournalNode叢集（slave1 slave2 slave3）：hadoop-daemon.sh start journalnode

第七步：檢視hadoop的日誌檔案 確保JournalNode正常啟動

第八步：在兩臺NameNode（master slave3）中隨便選擇一臺進行hdfs格式化（注意：一定要先啟動JournalNode再對hdfs進行格式化 否則會丟擲異常）

此時就會在master上生成fsimage檔案 

第九步：手動把master上的fsimage檔案拷貝到slave3上：scp -r ./hadoop-2.5.1 [email protected]:/opt

第十步：在兩臺NameNode（master slave3）中隨便選擇一臺進行zookeeper格式化: hdfs zkfc -formatZK

第十一步：在master上啟動zookeeper叢集（原則上可以在master slave1 slave2中任意一臺上

第十二步：檢視程序狀態

第十三步：通過瀏覽器檢視叢集狀態

第十四步：強制使NameNode master掛掉 測試NameNode slave3是否會自動接管

此時無法通過瀏覽器檢視master資訊

發現slave3還是standy 說明slave3並未成功接管

檢視slave3中FailOverController的日誌：tail -100 /usr/local/hadoop/logs/hadoop-root-zkfc-slave3.log

原因是沒有在master上設定對slave3免密登入。先刪除~/.ssh目錄下的所有檔案

關閉整個叢集stop-dfs.sh

首先設定slave3自己免密登入

在slave3上生成公鑰和私鑰：ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa

將slave3自己的公鑰追加到認證檔案中 並測試自己是否可以免密登入：ssh slave3

將slave3的公鑰拷貝到master的/opt目錄下：scp ~/.ssh/id_dsa.pub [email protected]:/opt

在master上將slave3的公鑰加入到認證檔案中：cat /opt/id_dsa.pub >> ~/.ssh/authorized_keys

測試slave3是否可以免密登入master：ssh master

將master的公鑰拷貝到slave3上：scp ~/.ssh/id_dsa.pub [email protected]:/opt

將master的公鑰新增到slave3的認證檔案中：cat /opt/id_dsa.pub >> ~/.ssh/authorized_keys

測試master是否可以免密登入slave3：ssh slave3

在master  slave1 slave2上啟動zookeeper

在master上關閉hdfs叢集再重啟 

然後強制殺死master上的NameNode程序：

通過瀏覽器檢視slave3狀態資訊發現還是standby

再次檢視slave3中FailOverController的日誌資訊 發現異常資訊如下：

由上面的警告可知：fuser: command not found，在做主備切換時執行fuser命令失敗了。檢視hdfs-site.xml配置檔案，
<property>
<name>dfs.ha.fencing.methods</name>
<value>sshfence</value>
</property>
hdfs-site.xml通過引數dfs.ha.fencing.methods來實現，在出現故障時通過哪種方式登入到另一個namenode上進行接管工作。

系統在任何時候只有一個namenode節點處於active狀態。在主備切換的時候，standby namenode會變成active狀態，原來的active namenode就不能再處於active狀態了，否則兩個namenode同時處於active狀態會有問題。所以在failover的時候要設定防止2個namenode都處於active狀態的方法，可以是Java類或者指令碼。fencing的方法目前有兩種，sshfence和shell 。sshfence方法是指通過ssh登陸到active namenode節點殺掉namenode程序，所以需要設定ssh無密碼登陸，還要保證有殺掉namenode程序的許可權。

在網上查詢到的解決方法如下：在兩個NameNode（master slave3）節點上安裝fuser(datanode節點不用安裝)

[[email protected]~]# yum -y install psmisc

[[email protected] ~]#  yum -y install psmisc

重新測試 發現當master（NameNode active ）掛掉以後 slave3（NameNode standby） slave3會自動接管 並將自己的狀態由standby改為active

需要注意的是：當master重新啟動後 master的狀態為standy slave3的狀態仍然為active 也就是說master並不會搶奪active狀態 這是因為它與keepalived不同 兩個NameNode沒有主備之分 處於同級關係 但是可以通過Hadoop HA管理命令手動將master的狀態改為active 將slave3的狀態改為standby（hdfs haadmin -transitionToActive master 此處master是之前設定的NameNode ID 而不是nameservice id）

Hadoop HA 管理命令

hdfs haadmin：

-transitionToActive：將NameNode狀態手動改為active

-transitionToStandby：將NameNode狀態手動改為Standby

至此 Hadoop HA叢集搭建成功。