在叢集啟動的前提下，首先安裝scala（主節點與從節點都安裝），scala安裝教程：http://blog.csdn.net/shuang_927/article/details/75986240

從官網下載spark安裝包，此次講解所安裝的版本為：

Scala-2.10.6

hadoop-2.7.1

spark-1.6.1-bin-hadoop2.6

配置環境變數：

編輯根目錄下的.bash_profile檔案，新增如下兩行：

export SPARK_HOME=/usr/spark/spark-1.6.1-bin-hadoop2.6
export PATH=$PATH:$SPARK_HOME/bin

看到很多部落格，都有配置如圖所示JAR這一行，如：

export SPARK_EXAMPLES_JAR=$HOME/spark-0.7.2/examples/target/scala-2.9.3/spark-examples_2.9.3-0.7.2.jar

但我是在spark的安裝目錄下的examples資料夾下，沒有target及其以下路徑的檔案和jar，不知道是否有人遇到和我一樣的情況，因此我配置的路徑為lib目錄下的jar包。

進入spark的安裝目錄下的conf資料夾下，

cp spark-env.sh.template spark-env.sh

修改spark-env.sh檔案，新增如下三行：

export SCALA_HOME=/usr/scala/scala-2.10.6
export JAVA_HOME=/usr/java/jdk1.8.0_101
SPARK_MASTER_IP=master
 

複製slaves.template到slaves：cp slaves.template slaves

修改slaves檔案內容：（把localhost修改為從節點的主機名，有幾個從節點就寫幾個）

將master配置好的檔案拷貝至從節點根目錄：scp spark-1.6.1-bin-hadoop2.6 [email protected]:~/

進入slave，將拷貝的檔案移動至與master的相同資料夾下。

啟動spark叢集：（在master上執行）

進入spark安裝目錄下的sbin目錄，啟動叢集命令：./start-all.sh

執行jps命令，如圖所示證明啟動驗證成功：

master：
 

slave：

虛擬機器瀏覽器訪問http://master:8080，出現如下頁面

關閉spark叢集命令：進入spark安裝目錄下的sbin目錄，執行./stop-all.sh。