1. 程式人生 > >hadoop學習---執行第一個hadoop例項

hadoop學習---執行第一個hadoop例項

hadoop環境搭建好後,執行第wordcount示例 1.首先啟動hadoop:sbin/start-dfs.sh,sbin/start-yarn.sh(必須能夠正常執行) 2.進入到hadoop的安裝目錄下(我的是/usr/hadoop)
3.新建hadoop hdfs檔案系統上的input資料夾(輸入檔案存放):hadoop fs -mkdir /input
4.傳入測試檔案:hadoop fs -put test.txt /input (這裡我是在hadoop安轉目錄建了一個test.txt檔案)
檢視剛剛傳入的檔案:hadoop fs -ls /input
5.執行wordcount示例:hadoop jar /usr/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.4.jar wordcount /input /output (下劃線具體路徑自己調整)。 執行後的首尾截圖:


6.執行成功後,檢視目錄:hadoop fs -ls / 多了一個output資料夾
繼續檢視 output 資料夾:hadoop fs -ls /output 有 _SUCCESS 和part-r-00000兩個資料夾 7.檢視part-r-00000 資料夾中的執行結果:hadoop fs -cat /output/part-r-00000

進入input資料夾就可看到上傳的test.txt檔案