Hadoop 1.0架構叢集搭建
阿新 • • 發佈:2018-12-18
1.環境準備
JDK
Linux
準備至少3臺機器
時間同步
ssh免祕鑰登入
關閉防火牆
2.node01下載解壓縮Hadoop
3.配置etc/hadoop/hadoop-env.sh
export JAVA_HOME=/usr/java/latest
4.配置core-site.xml
<configuration> <property> <name>fs.defaultFS</name> <value>hdfs://node01:9000</value> </property> <property> <name>hadoop.tmp.dir</name> <value>/opt/hadoop-2.6.1</value> </property> </configuration>
5.配置hdfs-site.xml
<configuration> <property> <name>dfs.replication</name> <value>3</value> </property> <property> <name>dfs.namenode.secondary.http-address</name> <value>node02:50090</value> </property> <property> <name>dfs.namenode.secondary.https-address</name> <value>node02:50091</value> </property> </configuration>
6.在/hadoop-2.6.5/etc/hadoop/
新建Masters檔案 寫上node02
7.在/hadoop-2.6.5/etc/hadoop/slaves
寫上
node01
node02
node03
8.將配置好的Hadoop通過scp發給其他節點
9.配置環境變數 vim ~/.bash_profile
export HADOOP_HOME=/usr/soft/hadoop-2.6.5
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin
10.將配置好的環境變數傳送到其他節點的/root/目錄下,所有節點載入環境變數
source ~/.bash_profile
11.回到根目錄下對NN進行格式化
hdfs namenode -format