1. 程式人生 > >Hadoop的啟動

Hadoop的啟動

log日誌 一個 縮小 cond 單獨 nod nbsp reduce tar

start-all.sh 啟動所有的Hadoop守護進程。包括NameNode、 Secondary NameNode、DataNode、JobTracker、 TaskTrack
stop-all.sh 停止所有的Hadoop守護進程。包括NameNode、 Secondary NameNode、DataNode、JobTracker、 TaskTrack
start-dfs.sh 啟動Hadoop HDFS守護進程NameNode、SecondaryNameNode和DataNode
stop-dfs.sh 停止Hadoop HDFS守護進程NameNode、SecondaryNameNode和DataNode
hadoop
-daemons.sh start namenode 單獨啟動NameNode守護進程 hadoop-daemons.sh stop namenode 單獨停止NameNode守護進程 hadoop-daemons.sh start datanode 單獨啟動DataNode守護進程 hadoop-daemons.sh stop datanode 單獨停止DataNode守護進程 hadoop-daemons.sh start secondarynamenode 單獨啟動SecondaryNameNode守護進程 hadoop-daemons.sh stop secondarynamenode 單獨停止SecondaryNameNode守護進程 start
-mapred.sh 啟動Hadoop MapReduce守護進程JobTracker和TaskTracker stop-mapred.sh 停止Hadoop MapReduce守護進程JobTracker和TaskTracker hadoop-daemons.sh start jobtracker 單獨啟動JobTracker守護進程 hadoop-daemons.sh stop jobtracker 單獨停止JobTracker守護進程 hadoop-daemons.sh start tasktracker 單獨啟動TaskTracker守護進程 hadoop-daemons.sh stop tasktracker 單獨啟動TaskTracker守護進程

如果Hadoop集群是第一次啟動,可以用start-all.sh。比較常用的啟動方式是一個一個守護進程來啟動,啟動的步驟如下。

1.啟動Hadoop的HDFS模塊裏的守護進程

HDFS裏面的守護進程啟動也有順序,即:

1)啟動NameNode守護進程;

2)啟動DataNode守護進程;

3)啟動SecondaryNameNode守護進程。

2.啟動MapReduce模塊裏面的守護進程

MapReduce的守護進程啟動也是有順序的,即:

1)啟動 JobTracker守護進程;

2)啟動TaskTracker守護進程。

關閉的步驟正好相反,在這裏就不描述了,讀者可以自己試一下。

註意 正常情況下,我們是不使用start-all.sh和stop-all.sh來啟動和停止Hadoop集群的。這樣出錯了不好找原因。建議讀者一個一個守護進程來啟動,哪個啟動失敗就去看相應的log日誌,這樣就縮小了找錯的範圍。

Hadoop的啟動