常見錯誤及解決方案

ResourceManager連線失敗

INFO client.RMProxy: Connecting to ResourceManager at hadoop108/192.168.10.108:8032 

可能原因
1.防火牆沒關閉
2.沒有啟動YARN

root使用者和ranan使用者兩個使用者啟動叢集不統一

一般使用ranan使用者啟動叢集，最好不要在root上啟動叢集。

不識別主機名

java.net.UnknownHostException: hadoop102: hadoop102 
        at 
java.net.InetAddress.getLocalHost(InetAddress.java:1475) 
        at 
org.apache.hadoop.mapreduce.JobSubmitter.submitJobInternal(Job
Submitter.java:146) 
        at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1290) 
        at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1287) 
        at  java.security.AccessController.doPrivileged(Native 
Method) 
at javax.security.auth.Subject.doAs(Subject.java:415) 
 

可能原因
1.主機名稱對映沒有配置
在/etc/hosts 檔案中新增 192.168.10.102 hadoop102
2.與系統的命令發生衝突
主機名稱不要起hadoop、hadoop000等特殊名稱

DataNode和NameNode程序同時只能工作一個

具體解決辦法

jps 發現程序已經沒有，但是重新啟動叢集，提示程序已經開啟。

原因是在linux的根目錄下/tep目錄中存在啟動的程序臨時快取檔案，將叢集相關程序刪除，再重新啟動叢集。

jps不生效

原因
全域性變數沒有生效
解決辦法
source /etc/profile 重新配置全域性壞境變數。

HDFS Web端刪除檔案沒許可權

解決辦法
在core.xml

在叢集配置的時候，寫的可以先不配的地方。

    <!-- 配置 HDFS 網頁登入使用的靜態使用者為 ranan --> 
    <property> 
        <name>hadoop.http.staticuser.user</name> 
        <value>ranan</value> 
    </property> 

配置成功記得分發到hadoop103、hadoop104

[ranan@hadoop102 hadoop]$ xsync core-site.xml
 

修改了叢集配置記得重啟叢集

[ranan@hadoop102 hadoop]$ myhadoop.sh stop
[ranan@hadoop102 hadoop]$ myhadoop.sh start