hadoop shell命令操作(二)
用mapreduce實現wordcount,這個程式碼不用我們自己寫,有專門的jar包,在
/home/hadoop/apps/hadoop-2.6.5/share/hadoop/mapreduce裡
hadoop-mapreduce-examples-2.6.5.jar
在hdfs裡建個目錄
看一下建成功沒
把檔案上傳到hdfs裡
cd /home/hadoop/apps/hadoop-2.6.5/share/hadoop/mapreduce
hadoop jar hadoop-mapreduce-examples-2.6.5.jar wordcount /wordcount/input/ /wordcount/output
計算完成了,我們看下
或者
看效果
相關推薦
hadoop shell命令操作(二)
用mapreduce實現wordcount,這個程式碼不用我們自己寫,有專門的jar包,在 /home/hadoop/apps/hadoop-2.6.5/share/hadoop/mapreduce裡 hadoop-mapreduce-examples-2.6.5.jar 在hdfs裡
MongoDB Shell基本操作(二)
1、插入測試資料> use mydb switched to db mydb > user1 = {FName:"Test",LName:"User",Age:30,Gender:"M",Country:"US"} { "FName
Shell腳本 (二)文本測試、整數值比較、字符串比較 條件測試操作 if語句應用實例
內存 root 條件測試 主機 serve 覆蓋 整數 local 分數 ####################test命令####################測試特定的表達式是否成立,當條件成立時,測試語句的返回值為0,否則為其他數值格式1:test 條件表達式格
Elasticsearch的DSL操作命令大全(二)
奇葩需求: 1. 按照論壇名稱,對論壇評論總量,1-5月按月聚合 相對應欄位為cmtCnt 按照論壇名稱,對論壇發帖點贊量,1-5月按月聚合 相對應欄位為adtCnt GET xi
shell編程(二)
basename xitong ipp 嵌套循環 htm doc 描述 標準輸出 開始 Shell echo命令 echo是Shell的一個內部指令,用於在屏幕上打印出指定的字符串。可以使用echo實現更復雜的輸出格式控制。 顯示轉義字符 echo "\"It is a
RxJava 詳解——簡潔的異步操作(二)
i++ 只有一個 tco 多個 etc 隊列 技術分享 () 而在 上次說的兩個例子,事件的發出和消費都是在同一個線程的。如果只用上面的方法,實現出來的只是一個同步的觀察者模式。觀察者模式本身的目的就是異步機制,因此異步對於 RxJava 是至關重要的。而要實現異步,則需要
shell腳本(二)
linux一 test條件判斷 如果表達式為true,返回0退出狀態,如果表達式為false,則返回非零退出狀態。test具有替代語法,使用括號“[]”將表達式括起來,更易於閱讀 1。字符串比較運算符: = ; != **) “ = ” 對兩個字符串進行比較,相等則返回零推出狀態,不相等則返回非零
Android入門之文件系統操作(二)文件操作相關指令
-h tools strong abc his art 為什麽 重命名 path (一)獲取總根 [java] view plain copy File[] fileList=File.listRoots(); //返回fileList.length為1 /
Discuz!X3.1數據庫的操作(二)
資源釋放 ech tro art www. 處理 類型 row limit 數據庫自定義query 方法名:BD::query() 參數解釋: $sql:自定義SQL語句 $arg:需要綁定的數據 $unbuffered:是否使用無緩存查詢 12345678910
文件操作(二)
創建 nbsp pan spa read pen 強制 列表 color 1、f.tell()和f.seek(0): 1 f=open(‘my_heart_will_go_on‘,‘r‘,encoding=‘utf-8‘)#f 是文件句柄,默認是只讀模式r,w是寫模式—
Shell基礎語法(二)
-s pac nbsp num mil etc nor 不能 rep if語句基礎格式格式1:if 條件 ; then 語句; fi格式2:if 條件; then 語句; else 語句; fi格式3:if …; then … ;elif …; then …; else …
mysql基本操作(二)
數據 post upd ins mysql基本 ble sel pda 沒有 1、向表msg中插入數據,先創建表,再插入數據 mysql> create table msg ( -> id int, -> title varchar(60),
Hadoop學習之路(二)Hadoop發展背景
chukwa 站點 avro azkaban das 可擴展性 對數 就是 pro Hadoop產生的背景 1. HADOOP最早起源於Nutch。Nutch的設計目標是構建一個大型的全網搜索引擎,包括網頁抓取、索引、查詢等功能,但隨著抓取網頁數量的增加,遇到了嚴重的可擴
Shell 編程(二)
cut one finished home HR ron roo nes pan for in 循環語句 #!/bin/bash for x in one two three four do echo number $x done 例:取出passwd
shell腳本(二)--if流程控制語句和for循環語句的使用
系統/運維 Linux shell if語句 for循環語句 理論部分:1、在簡單的腳本中各條語句按順序執行,從而實現自動化的管理,順序單一執行太過機械化,不夠“智能”,難以實現更加靈活的系統任務。例如:批量安裝軟件包100臺機器 50臺已安裝 50臺未安裝2、shell環境根據$?來判斷
小強的Hadoop學習之路(二)
com TE 區別 截斷 用戶 分開 路徑問題 登陸用戶 學習 接著第一遍。中間間隔了大約半年的時間了,話不多說,直接進入主題。 這篇是主要是應用篇。目前的環境是4臺機器 ,環境 centos 7.2 CDH5.10.2 網上很多安裝教程,這邊就不說明了。 Hive+
hive中時間操作(二)
to_date day date_add IT mon times () net AS 轉:https://blog.csdn.net/qq646748739/article/details/77997276 --Hive中日期函數總結:--1.時間戳函數--日期轉時間
linux基本命令總結(二)
mef 進行 天前 ota naconda username n+1 ever flat 3、基本命令-2基本命令-2壓縮和歸檔打包:即歸檔,類似於旅遊之前收拾行李壓縮:為了減少占用的磁盤空間,可以做備份,在網絡上傳輸時節省網絡帶寬。打包壓縮軟件windows:winrar
VC++中文件操作(二)--- .ini文件、CFile64
其中 文件操作 ray rom 數組 ini文件 情人節 set 清空 各種關於文件的操作在程序設計中是十分常見,如果能對其各種操作都了如指掌,就可以根據實際情況找到最佳的解決方案,從而在較短的時間內編寫出高效的代碼,因而熟練的掌握文件操作是十分重要的。本文將對Visu
Oracle基本操作(二)
enable 信息 iat 提高 info RoCE zed 數據 number oracle數據庫的基本操作; 創建表空間 插拔數據庫 創建用戶 創建數據表(事務) 索引 視圖 序列 同義詞 一,創建表空間例; create tablespace school