首先安裝jdk，
我這裡使用的是linux mint，自帶圖形化介面，下載好linux版的jdk8-161後，放到/development/目錄下，進行解壓

# 將jdk8u_161改名成jdk
~ mv jdk8u_161 jdk
# 解壓jdk壓縮包
~ tar -zxvf jdk

1. 編輯Java環境變數：

~ vim /etc/profile
# 在profile檔案最後加入下面程式碼
export JAVA_HOME=/home/hoodzwh/development/jdk
export PATH=$JAVA_HOME/bin:$PATH
export CLASSPATH=.:$JAVA_HOME
 
/lib/dt.jar:$JAVA_HOME/lib/tools.jar
# 立即使環境變數生效
~ source /etc/profile

配置完成之後，在命令列輸入java -version，顯示java的版本資訊則表示配置java成功，JAVA_HOME的值是你本機jdk的安裝目錄，在linux中，分隔符路徑的符號是:，linux下是區分大小寫的，所以上面的字母要注意大寫。
2. 配置ssh免密登入
進入使用者根目錄下，首先確定系統是否有ssh命令，沒有則安裝

~ apt-get install ssh

# 新建.ssh資料夾，如果有則不用建
~ mkdir .ssh
#進入.ssh資料夾，生成金鑰
 

~ ssh-keygen -t rsa
這個命令會在.ssh資料夾中生成id_rsa私鑰檔案、id_rsa.pub公鑰檔案。然後將id_rsa.pub中的內容加進authorized_keys檔案中。
# 如果沒有authorized_keys檔案則新建
~ touch authorized_keys
~ cat id_rsa.pub >> authorized_keys
**注意，這裡是>>，而不是>，如果是>，則會刪除id_rsa.pub中的內容。**
之後，測試ssh到本機是否需要密碼
~ ssh localhost
如果不需要，說明ssh免密登入成功
 

1. 下載hadoop3.0.0.tar.gz改名為hadoop，並解壓到開發檔案目錄下，
   編輯/etc/profile檔案，配置hadoop環境變數

# 在profile檔案最後加入以下程式碼
~ export HADOOP_HOME=/home/hoodzwh/development/hadoop
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin
# 生效profile檔案
~ source /etc/profile

進入到hadoop/etc/hadoop目錄下，需要配置的檔案有：
hadoop-env.sh，core-site.xml，hdfs-site.xml，mapred-site.xml，yarn-site.xml，在此之前，需要配置/etc/hosts

~ vim /etc/hosts
#在hosts檔案最後加入如下程式碼：
127.0.0.1 master
127.0.0.1 slave1
127.0.0.1 slave2

**hadoop-env.sh**
export JAVA_HOME=/home/hoodzwh/development/jdk

**core-site.xml**
 <property>
     <name>fs.defaultFS</name>
     <value>hdfs://master:9000</value>
 </property>
 <property>
    <name>hadoop.tmp.dir</name>
    <value>/home/hoodzwh/development/hadoop/tmp</value>
 </property>
 **注意：這裡hadoop.tmp.dir的value，如果用預設的容易出問題，預設的tmp路徑在每次重啟機器會刪除tmp資料夾內容，所以我自己在hadoop目錄下新建tmp資料夾存放臨時檔案**

**hdfs-site.xml**
<property>
        <name>dfs.replication</name>
        <value>1</value>
</property>
這裡是配置檔案需要儲存多少份，因為是偽分散式，我這裡不需要多餘的副本

**yarn-site.xml**
<property>
    <name>yarn.resourcemanager.hostname</name>
    <value>master</value>
</property>
<property>
    <name>yarn.nodemanager.aux-services</name>
    <value>mapreduce_shuffle</value>
</property>

**mapred-site.xml**
    <property>
        <name>mapreduce.framework.name</name>
        <value>yarn</value>
    </property>
    <property>
        <name>mapreduce.admin.user.env</name>
        <value>HADOOP_MAPRED_HOME=$HADOOP_COMMON_HOME</value>
    </property>
    <property>
        <name>yarn.app.mapreduce.am.env</name>
        <value>HADOOP_MAPRED_HOME=$HADOOP_COMMON_HOME</value>
    </property>

完成之後，進入hadoop/bin目錄下，

~ ./hdfs namenode -format
進入hadoop/sbin目錄下
~ ./start-dfs.sh
~ ./start-yarn.sh

1. 驗證hadoop叢集是否搭建成功：
   在瀏覽器輸入：http://master:8088 和 http://master:9870看看有沒有yarn和namenode節點的資訊，如果有介面出現，說明配置成功