1. 程式人生 > >Hadoop單機模式安裝-(1)安裝設定虛擬環境

Hadoop單機模式安裝-(1)安裝設定虛擬環境

網路上關於如何單機模式安裝Hadoop的文章很多,按照其步驟走下來多數都失敗,按照其操作彎路走過了不少但終究還是把問題都解決了,所以順便自己詳細記錄下完整的安裝過程。

此篇主要介紹如何在Windows環境下設定虛擬機器環境以及一些準備工作,熟悉WMware的朋友可以略過。

我所記錄的筆記適合沒有Linux基礎的朋友跟我一起操作,同時歡迎高手參觀指導。

環境約定

以下環境基於攥寫時間:5th July 2015。

宿主機器:Windows 8

虛擬機器環境:WMware Wrokstation 11

Ubuntu版本:Ubuntu Desktop 14.04.2

物理環境:

筆記本Thinkpad T420 i5 CPU 4+4=8G記憶體, 500G硬碟。

其它:

Java版本:7

Hadoop版本:2.7.0

接下來開始設定虛擬機器環境。

安裝WMware Workstation 11,如果機器裡已經安裝了Hyper-v需要將其刪除,否則VMware會提示不相容。

下載Ubuntu的iso映象,這裡我下載的是Desktop版本,最新的穩定版是14.04.2,直接在Ubuntu官網下載就可以。

同樣也可以選擇Ubuntu的Server版本,主要是Desktop下的Gedit做些配置操作比較方便,如果對vim比較熟練並且不介意純命令介面的話就無所謂了。

下載地址:

下面開始安裝Ubuntu虛擬機器。

開啟VMware,新建一個虛擬機器。

使用典型配置:

選擇稍後安裝。某些版本直接安裝的話會出現問題。

選擇作業系統。

給虛擬機器取一個名字,然後指定檔案儲存位置。儘量留20G的儲存。

這裡預設即可,不過我選擇磁碟儲存為單個檔案。

點選完成退出設定。

點選新建的虛擬機器,設定 CD/DVD安裝介質。

選擇下載的Ubuntu所在位置。

另在虛擬機器網路配置介面,建議斷開網路連線,避免在安裝過程中自動下載補丁。

至此虛擬機器環境設定完畢,下一篇會介紹如何簡單的安裝Ubuntu。

相關推薦

Hadoop單機模式安裝-(1)安裝設定虛擬環境

網路上關於如何單機模式安裝Hadoop的文章很多,按照其步驟走下來多數都失敗,按照其操作彎路走過了不少但終究還是把問題都解決了,所以順便自己詳細記錄下完整的安裝過程。 此篇主要介紹如何在Windows環境下設定虛擬機器環境以及一些準備工作,熟悉WMware的朋友可以略過。 我所記錄的筆記適合沒有Linux

Hadoop單機模式安裝-(2)安裝Ubuntu虛擬機器

網路上關於如何單機模式安裝Hadoop的文章很多,按照其步驟走下來多數都失敗,按照其操作彎路走過了不少但終究還是把問題都解決了,所以順便自己詳細記錄下完整的安裝過程。 此篇主要介紹在虛擬機器設定完畢後,如何進行Ubuntu的安裝。 我所記錄的筆記適合沒有Linux基礎的朋友跟我一起操作,同時歡迎高手參觀指

Hadoop單機模式安裝-(3)安裝和配置Hadoop

網路上關於如何單機模式安裝Hadoop的文章很多,按照其步驟走下來多數都失敗,按照其操作彎路走過了不少但終究還是把問題都解決了,所以順便自己詳細記錄下完整的安裝過程。 此篇主要介紹在Ubuntu安裝完畢後,如何進行Hadoop的安裝和配置。 我所記錄的筆記適合沒有Linux基礎的朋友跟我一起操作,同時歡迎

Ubuntu14下Hadoop開發<1> 基礎環境安裝

oot jar包 臺式機 解壓 span ice href 安裝samba lan 準備了一臺淘汰的筆記本。單核CPU。3G內存。160G硬盤;準備一個2G的U盤在官網下載了64位的14.04版本號(麒麟)的ISO。下載UNetbootin(Ubuntu專用U盤安裝工

Hadoop單機式偽分散式安裝詳解

Ubuntu、centos7、6叢集搭建:https://blog.csdn.net/qq_40938267/article/details/83476896 遇到的問題以及解決方法: 1.在./bin/hdfs namenode –format時 載入不出class  檢視配置的

HadoopHadoop單機偽分散式的安裝和配置

因為lz的linux系統已經安裝好了很多開發環境,可能下面的步驟有遺漏。之前是在docker中配置的hadoop單機偽分散式[ ],並且在docker只有root使用者,所有沒有許可權問題存在。這裡直接在linux下配置,主要是為了能用netbeans ide除錯had

Hama單機模式下的安裝

作者:王連平 Hama是Apache公司對Google公司的Pregel模型的開源實現,實際上則是對經典的BSP模型的實現。Hama將BSP模型同Hadoop的HDFS結合,並且很好的使用了zookeeper來做分散式工作。它目前有三種執行引擎,即Hadoop的Map

spark學習1——配置hadoop 單機模式並執行WordCount例項(ubuntu14.04 & hadoop 2.6.0)

1. 安裝SSH  hadoop是採用SSH進行通訊的 ,此時要設定密碼為空,即不需要密碼登陸,免去每次登陸時都要輸入密碼,當叢集較大時該步驟顯得尤為重要。     $ sudo apt-get install ssh 安裝完成後啟動服務:     $ /etc/init.

《Linux就該這麽學》第1章 部署虛擬環境安裝linux系統。

部署 alt linu 虛擬 虛擬環境安裝 圖片 技術分享 inux http 《Linux就該這麽學》第1章 部署虛擬環境安裝linux系統。

Linux就該這麽學第1章 部署虛擬環境安裝linux系統。

上海 reboot 打印機 虛擬機 root lec linux系統 部署 soft Q:在虛擬機中安裝LInuxA:-- 稍後安裝操作系統-- 內存2G,不低於1G-- 設置CPU處理器數以及核心數,開啟虛擬化功能-- USB控制器、聲卡、打印機等設備移除-- 打開計算機

在Linux環境安裝pyenv、Vtualenv虛擬環境和jupyter

sys 交互 cts evel package 單獨 令行 qlite 命令行工具 使用pyenv和Vtualenv做環境隔離,使用jupyter方便我們學習 新建用戶 所有操作都應在單獨的用戶中進行,不要使用root用戶 useradd python Pyenv 安裝Py

conda安裝過程和建立虛擬環境

a安裝:下載 .sh指令碼。執行shell指令碼即可。安裝過程中,會顯示出conda安裝路徑。安裝過後,將路徑加到環境變數中。過程是這樣子的 1、首先在所在系統中安裝Anaconda。可以開啟命令列輸入conda -V檢驗是否安裝以及當前conda的版本。 2、conda常用的命令。   &n

hadoop單機模式connect refused問題

所以說這裡一定要寫一下了,由於之前偷懶,在沒有執行hadoop自帶的jar包的情況下就配置了hadoop的core-site.xml和hdfs-site.xml導致單機模式執行hadoop就會出現connection refused的錯誤,因此將以前配置的內容刪除就可以了  

Python3 安裝和使用 virtualenv 虛擬環境

1.安裝 virtualenv pip3 install virtualenv virtualenvwrapper 2.檢視 virtualenvwrapper.sh 的位置 which virtualenvwrapper.sh 輸出: /usr/local/bin/vi

使用Anaconda安裝tensorflow並在虛擬環境下使用pycharm執行程式

1.安裝Anaconda anaconda的使用總結 下載: * // Anaconda3.x 下載 1. https://www.anaconda.com/download/ * // PyCharm 下載 2. https://www.jetbrains.com/pycharm/

Python3安裝與配置venv虛擬環境

Python3安裝與配置venv虛擬環境 建立安裝目錄 下載適宜的版本([傳送門](https://www.python.org/ftp/python/)) 解壓 config 安裝 配置Python3軟連線 驗證python3環境

windows linux中安裝python並設定環境變數

windows 雙擊開啟後,選中Customize installaion, 要記得勾上add python to Path 選項,意思是把Python的安裝路徑新增到系統環境變數的Path變數中。 下一步按照預設的進行勾選 在下一步記得勾選第一項install

hadoop單機模式的構建、配置與執行測試步驟(ubuntu14.04)

PS:全程以root的角色進行配置安裝 本篇文章的前期準備工作可以看我之前的部落格連結: 參照上面兩篇文章,設定好機器環境和準備好檔案包,這篇文章是以下載好相應的jdk、hadoop檔案的

ContOS7編譯安裝python3,配置虛擬環境

Python36編譯安裝 一,下載python原始碼包 網址:https://www.python.org/downloads/release/python-367/ # 軟體包下載到/opt目錄 cd /opt # 下載原始碼包到/opt wget https://www.py

Hadoop單機模式配置和官方案例

Hadoop單機模式 1.環境準備 0.安裝jdk(自行安裝) 1.配置hadoop環境變數 下載hadoop的Linux的安裝包,並解壓 複製hadoop的解壓後的路徑