說道大資料和機器學習，就少不了Spark.本文主要介紹在Linux下搭建單機環境的Spark的步驟。

安裝Java SE

注意選擇Linux版本，根據機器型別選擇32位或者64位。

2、下載jdk-8u131-linux-x64.tar.gz後，解壓到自己指定目錄。

$ tar -zxvf jdk-8u131-linux-x64.tar.gz -C /usr/lib/java

3、配置JAVA環境變數。

開啟.bashrc檔案。

$ nano ~/.bashrc

在.bashrc檔案末尾增加如下內容：

export JAVA_HOME=/usr/lib/java/jdk1.8.0_131 
export
 
 JRE_HOME=${JAVA_HOME}/jre 
export CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib 
export PATH=${JAVA_HOME}/bin:${JRE_HOME}/bin:$PATH 

儲存後退出，執行如下命令，使修改環境變數即可生效：

$ source ~/.bashrc

4、檢測java是否成功安裝。

$ java -version
java version "1.8.0_131"

如果顯示了java安裝的版本，則表示已正確安裝，可以進行下一步了。

安裝Scala

2、下載scala-2.12.2.tgz後，解壓到指定的目錄：

$ tar -zxvf scala-2.12.2.tgz -C /opt/scala/

3、配置scala環境變數。

開啟.bashrc檔案。

$ nano ~/.bashrc

在.bashrc檔案末尾增加如下內容：

export SCALA_HOME=/opt/scala/scala-2.12.2 
export PATH=${SCALA_HOME}/bin:$PATH 

儲存後退出，執行如下命令，使修改環境變數即可生效：

$ source ~/.bashrc

4、檢測scala是否正確安裝。

$ scala -version
Scala code runner version
 
 2.12.2 -- Copyright 2002-2017, LAMP/EPFL and Lightbend, Inc

若顯示如上資訊，則表示scala已安裝正確。

安裝Spark

2、下載spark-2.1.1-bin-hadoop2.7.tgz後，解壓到指定的目錄：

$ tar -zxvf spark-2.1.1-bin-hadoop2.7.tgz -C /opt/spark/

3、配置scala環境變數。

開啟.bashrc檔案。

$ nano ~/.bashrc

在.bashrc檔案末尾增加如下內容：

export SPARK_HOME=/opt/spark/spark-2.1.1-bin-hadoop2.7
export PATH=${SPARK_HOME}/bin:$PATH 

儲存後退出，執行如下命令，使修改環境變數即可生效：

$ source ~/.bashrc

4、檢測spark是否正確安裝。

$ spark-shell

如果出現如下介面，則表示spark已正確安裝：

安裝sbt

2、下載sbt-0.13.15.tgz後，解壓到指定的目錄：

$ tar -zxvf sbt-0.13.15.tgz -C /opt/scala/sbt/

3、配置sbt環境變數。

開啟.bashrc檔案。

$ nano ~/.bashrc

在.bashrc檔案末尾增加如下內容：

export SBT_HOME=/opt/scala/sbt
export PATH=${SBT_HOME}/bin:$PATH 

儲存後退出，執行如下命令，使修改環境變數即可生效：

$ source ~/.bashrc

4、建立啟動sbt的指令碼。

$ mkdir /opt/scala/sbt/ 
$ cd /opt/scala/sbt/ 
$ touch sbt  

指令碼內容如下，注意sbt-launch.jar的路徑

SBT_OPTS="-Xms512M -Xmx1536M -Xss1M -XX:+CMSClassUnloadingEnabled -XX:MaxPermSize=256M" 
java $SBT_OPTS -jar /opt/scala/sbt/bin/sbt-launch.jar "[email protected]" 

修改sbt檔案的許可權

$ chmod u+x sbt 

5、檢測sbt是否正確安裝。

$ sbt sbt-version
[info] 0.13.15

第一次執行的時候會下載很多東西，不用管它，後來就好了。
如果出現sbt的版本資訊就表示安裝成功。

至此，Linux下Spark單機環境已經成功搭建完畢！