操作hadoop常用的命令
阿新 • • 發佈：2019-01-09
1.檢視hdfs某一資料夾的大小： hadoop fs -du -h /路徑
2.檢視文字的前十行、後十行.......
隨機返回指定行數的樣本資料
hadoop fs -cat /test/gonganbu/scene_analysis_suggestion/* | shuf -n 5
返回前幾行的樣本資料
hadoop fs -cat /test/gonganbu/scene_analysis_suggestion/* | head -100
返回最後幾行的樣本資料
hadoop fs -cat /test/gonganbu/scene_analysis_suggestion/* | tail -5
檢視文字行數
hadoop fs -cat hdfs://172.16.0.226:8020/test/sys_dict/sysdict_case_type.csv |wc -l
檢視檔案大小(單位byte)
hadoop fs -du hdfs://172.16.0.226:8020/test/sys_dict/*
hadoop fs -count hdfs://172.16.0.226:8020/test/sys_dict/*