1. 程式人生 > >ubuntu單機下安裝配置spark

ubuntu單機下安裝配置spark

一.安裝JDK

二.安裝SCALA
1.解壓scala-2.12.0.tgz到任意檔案目錄。
2.修改 /etc/profile配置檔案,加入以下程式碼
sudo echo export SCALA_HOME="~/hadoop/scala-2.12.0" >> ~/.bashrc
sudo echo export PATH=$SCALA_HOME/bin:$PATH >> ~/.bashrc
3.source ~/.bashrc 使配置檔案生效
4.scala -version 檢查是否安裝成功

三.安裝Spark
1.解壓原始檔到任意目錄
2.配置 ~/.bashrc檔案
sudo echo export SPARK_HOME="~/hadoop/spark-2.0.2-bin-hadoop2.6" >> ~/.bashrc
3.Source ~/.bashrc 使配置檔案生效
4.切換至spark bin目錄
5.$ ./spark-shell 檢查是否安裝成功

通過Spark Shell 進行互動分析

如下圖所示: