1. 程式人生 > >Hadoop 1.0架構叢集搭建

Hadoop 1.0架構叢集搭建

1.環境準備

JDK 
Linux
準備至少3臺機器 	
時間同步
ssh免祕鑰登入
關閉防火牆

2.node01下載解壓縮Hadoop

3.配置etc/hadoop/hadoop-env.sh

export JAVA_HOME=/usr/java/latest

4.配置core-site.xml

<configuration> 
    <property> 
        <name>fs.defaultFS</name> 
        <value>hdfs://node01:9000</value> 
    </property> 
    <property> 
        <name>hadoop.tmp.dir</name> 
        <value>/opt/hadoop-2.6.1</value> 
    </property> 
</configuration> 

5.配置hdfs-site.xml

<configuration> 
  <property> 
      <name>dfs.replication</name> 
      <value>3</value> 
 </property> 
 <property> 
      <name>dfs.namenode.secondary.http-address</name> 
      <value>node02:50090</value> 
 </property> 
 <property> 
      <name>dfs.namenode.secondary.https-address</name> 
      <value>node02:50091</value> 
   </property> 
</configuration> 

6.在/hadoop-2.6.5/etc/hadoop/新建Masters檔案 寫上node02

7.在/hadoop-2.6.5/etc/hadoop/slaves寫上

node01
node02
node03

8.將配置好的Hadoop通過scp發給其他節點

9.配置環境變數 vim ~/.bash_profile

export HADOOP_HOME=/usr/soft/hadoop-2.6.5 
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

10.將配置好的環境變數傳送到其他節點的/root/目錄下,所有節點載入環境變數

source ~/.bash_profile

11.回到根目錄下對NN進行格式化

hdfs namenode -format

13.瀏覽器輸入node01:50090