2. 程式人生 > >HDFS常用命令

HDFS常用命令

阿新 • • 發佈：2018-09-27
進入 put enter oop 不存在 當前目錄 移動 文件信息 -h

創建目錄，默認只有user這一層目錄，所以應該新建一個當前登錄用戶的目錄 hadoop fs -mkdir /user/hadoop 查看user下的文件信息 hadoop fs -ls /user 查看user下的文件信息（包括其子目錄下的文件信息）(遞歸的) hadoop fs -lsr /user 把本地文件放到hdfs上 hadoop fs -put /home/mytest/test.txt /user/hadoop 把本地文件放到hdfs上(目錄為默認目錄，即/user/$USER，此目錄若不存在需要創建) hadoop fs -put test.txt . (復制到hdfs當前目錄下，首先要創建當前目錄)
把hdfs上的文件復制到本地當前目錄下 hadoop fs -get /user/hadoop/test.txt . (復制到本地當前目錄下) 查看hdfs上的文件內容 hadoop fs -cat /user/hadoop/test.txt hadoop fs -text /user/hadoop/test.txt 刪除hdfs上面的文件 hadoop fs -rm /user/hadoop/test.txt hadoop fs -rmr /user/hadoop/data (遞歸刪除data目錄下的所有文件夾，包括data目錄) 查看hdfs上文件的最後1000字節 hadoop fs -tail /user/hadoop/test.txt (查看最後1000字節)
刪除hdfs上的文件 hadoop fs -rm /user/hadoop/test.txt 查看文件的大小或當前目錄下所有文件的大小 hadoop fs -du /user/hadoop/data.txt hadoop fs -du /user/hadoop 移動hdfs下的文件或重命名 hadoop fs -mv /user/hadoop/data.txt /user/hadoop/result.txt 復制hdfs下的文件到別的目錄 hadoop fs -cp /user/hadoop/data.txt /user/result/result.txt 創建一個空文件 hadoop fs -touchz /user/hadoop/data.txt
查看幫助命令 hadoop fs -help ls (查看ls命令的幫助文檔) 退出安全模式 hadoop dfsadmin -safemode leave 進入安全模式 hadoop dfsadmin -safemode enter 查看hdfs統計信息 hadoop dfsadmin -report

HDFS常用命令

相關推薦

大數據學習之五——HDFS常用命令

dfs 放置 shell. 下載 文件 參數 linux系統 文件的 com HDFS文件操作常用命令： （1）列出HDFS下的文件 hadoop dfs -ls <目錄> （2）上傳文件 將Linux系統本地文件上傳到HDFS中 hadoop d

HDFS常用命令整理

Hadoop HDFS 簡介： HDFS 文件系統提供了相當多的shell 操作命令，大大方便了程序員和系統管理人員查看、修改HDFS 上的文件。進一步，HDFS 的操作命令和Unix/Linux 的命令名稱和格式相當一致，因而學習HDFS 命令的成本也大為縮小。 1.命令幫助 [hadoop@h

HDFS 常用命令行：

存儲 question 路徑名 homework hive 查看 常用命令 bsp 存儲大小 1. 查看各庫的存儲大小 hdfs dfs -du -h /user/hive/warehouse 2. 刪除HDFS 文件 hdfs dfs -rmr 絕對路徑名 例如：hd

HDFS常用命令

進入 put enter oop 不存在 當前目錄 移動 文件信息 -h 創建目錄，默認只有user這一層目錄，所以應該新建一個當前登錄用戶的目錄 hadoop fs -mkdir /user/hadoop 查看user下的文件信息 hadoop fs -ls /use

HDFS常用命令(hadoop)

格式化namenode和datanode： hadoop namenode -format hadoop datanode -format -help 功能：輸出這個命令引數手冊 -ls 功能：顯示目錄資訊 示例： hadoop

大資料之（3）Hadoop環境MapReduce程式驗證及hdfs常用命令

一、MapReduce驗證 本地建立一個test.txt檔案 vim test.txt 輸入一些英文句子如下： Beijing is the capital of China I love Beijing I love China 上傳test.txt

HDFS（二）——HDFS 常用命令

操作 HDFS 的命令主要分兩種：操作命令，管理命令。 一、操作命令 操作命令以 hdfs dfs ****開頭。 -mkdir：建立目錄。 例 1：hdfs dfs -mkdir /aaa—> 在 HDFS 的根目錄下建立一個目錄aaa。 例 2：hdfs

hdfs常用命令 講解

  常用命令引數介紹             -help(功能：輸出這個命令引數手冊) -ls (功能：顯示目錄資訊) 示例： hadoop fs -ls hdfs://hadoop-server01:9000/ 備註：這

Hadoop hdfs 常用命令

概述 前言 呼叫檔案系統(FS)Shell命令應使用 bin/hadoop fs 的形式。但也可以用hadoop dfs ,兩者效果一樣。(hadoop dfs命令已不再建議使用) 常用命令 -help 功能：輸出這個命令引數手冊 -ls 功能：顯示目錄資訊 示

HDFS常用命令以及簡單API

1) kill -9 xxxx 殺掉程序 2)hdfs的客戶端 1.網頁形式->測試用 ip:50070 2.命令列形式->測試用 3.企業級API 檢視幫助 hdfs dfs -help 檢視hdfs命令引數 1)檢視目錄檔案 hdfs

HDFS常用命令引數介紹

-help 功能：輸出這個命令引數手冊 -ls 功能：顯示目錄資訊 示例： hadoop fs -ls hdfs://hadoop-server01:9000/ 備註：這些引數中，所有的hdfs路徑都可以簡寫 --

Hadoop hdfs常用命令

以下是2.6版本以後的命令 1. 檔案操作 (1) 列出HDFS下的檔案  hdfs dfs -ls (2) 列出HDFS檔案下名為in的文件中的檔案 hdfs dfs -ls in (3) 上傳檔案 將當前目錄下的test1檔案上傳到HDFS上並重命

hdfs常用命令 講解

常用命令引數介紹             -help(功能：輸出這個命令引數手冊) -ls (功能：顯示目錄資訊) 示例： hadoop fs -ls hdfs://hadoop-server01:9000/ 備註：這些引數中，所有的hdfs路徑都可以簡寫 -->

Hadoop學習筆記4之HDFS常用命令

1.檢視${Hadoop_HOME}/bin/hadoop指令碼的hadoop命令幫助資訊列印可知：hadoop  version   //檢視版本hadoop fs        //檔案系統客戶端hadoop  jar    //執行jar包hadoop classpat

Hadoop中HDFS常用命令

hadoop fs -mkdir /tmp/input 在HDFS上新建資料夾 hadoop fs -put input1.txt /tmp/input 把本地檔案input1.txt傳到HDFS的/tmp/input目錄下 hadoop

hdfs常用命令：一

檔案操作 (1) 列出HDFS下的檔案 hdfs dfs -ls / (2) 列出HDFS檔案下名為users的文件中的檔案 hdfs dfs -ls /users (3) 上傳檔案 將hadoop目錄下的test01檔案上傳到HDFS上並重

HDFS 常用命令

    hadoop fs -mkdir /tmp/input              在HDFS上新建資料夾    Hadoop fs -put input1.txt /tmp/input  把本地檔案input1.txt傳到HDFS的/tmp/input目錄下   

HDFS基礎1：HDFS的常用命令

前言 HDFS系統中不能使用touch命令來建立普通檔案。 1 檔案操作 （1）列出HDFS下的檔案 （2）刪除HDFS下的檔案或目錄 hdfs dfs -rm -r /[檔案或目錄] （3）檢視HDFS下檔案的內容 hdfs dfs -c

HDFS檔案常用命令

1、fs最常用命令 bin/hadoop fs -ls hdfs_path //檢視HDFS目錄下的檔案和子目錄 bin/hadoop fs -mkdir hdfs_path //在HDFS上建立資料夾 bin/hadoop fs -rm hdfs_path //刪除HDFS上

HDFS之常用命令（持續更新）

1. 檔案許可權操作 # 設定檔案或資料夾許可權為所有使用者都可以訪問 hadoop fs -setfacl -m other::rwx /test/test.json # 檢視某個檔案或資料夾許可權 hadoop fs -getfacl /hebei_data/suspect_t