Hadoop 叢集安裝(從節點安裝配置)
1、Java環境配置
view plain copy
sudo mv /tmp/java /opt/
jdk安裝完配置環境變數,編輯/etc/profile:
view plain copy
sudo vim /etc/profile
在檔案末尾,新增如下內容:
view plain copy
export JAVA_HOME=/opt/java/
export PATH=$JAVA_HOME/bin:$PATH
重新整理環境變數:
view plain copy
source /etc/profile
利用java檢視版本號命令驗證是否安裝成功:
view plain copy
java -version
2、修改hosts檔案
編輯/etc/hosts檔案:
view plain copy
sudo vim /etc/hosts
新增本機IP地址對應本機對映名和其它節點IP地址對應對映名:
view plain copy
0.0.0.0 master
0.0.0.0 slave1
0.0.0.0 slave2
節點IP地址即”內網管理地址“
3、建立公鑰
在zhangyu使用者下建立公鑰:
view plain copy
ssh-keygen
出現如下內容:
Enter file in which to save the key (/home/zhangyu/.ssh/id_rsa):
直接使用預設選項,回車即可,出現如下內容:
Enter passphrase (empty for no passphrase):
直接回車,出現內容:
Enter same passphrase again:
直接回車,建立完成。
拷貝公鑰,過程中需要輸入使用者密碼:"zhangyu"
view plain copy
ssh-copy-id master
view plain copy
ssh-copy-id slave1
view plain copy
ssh-copy-id slave2
命令執行過程中需要輸入“yes”和密碼“zhangyu”。
拷貝完可以測試連線。
4、Hadoop環境配置
view plain copy
sudo mv /tmp/hadoop /opt/
hadoop安裝完配置環境變數,編輯/etc/profile:
view plain copy
sudo vim /etc/profile
在檔案末尾新增如下內容:
view plain copy
export HADOOP_HOME=/opt/hadoop/
export PATH=$HADOOP_HOME/bin:$PATH
重新整理環境變數:
view plain copy
source /etc/profile
利用hadoop檢視版本號命令驗證是否安裝成功:
view plain copy
hadoop version
5、建立資料資料夾:
view plain copy
sudo mkdir /data
所有者修改為當前使用者:
view plain copy
sudo chown -R zhangyu.zhangyu /data
至此,從節點1配置完成。