1. 程式人生 > >Hadoop配置檔案的作用

Hadoop配置檔案的作用

介紹

hadoop-env.sh

用來定義hadoop執行環江相關的配置資訊,比如配置JAVA_HOME環境變數、為hadoop的JVM指定特定的選項、指定日誌檔案所在的目錄路徑一級master和slave檔案的位置等。

core-site.xml

用於定義系統級別的引數,比如HDFS URL、Hadoop的臨時目錄一級使用者rack-aware叢集中的配置檔案的配置等,此中的引數定義會覆蓋core-default.xml檔案中的預設配置。

hdfs-site.xml

HDFS的相關設定,如檔案副本的個數、塊大小及是否使用強制許可權等,此中的引數會覆蓋hdfs-default.xml檔案中預設設定。

mapred-site.xml

HDFS的相關設定,如reduce任務的默認個數、任務所能夠市容記憶體的預設上下限等,此中的引數定義會覆蓋mapred-default.xml檔案中的配置。

參考部落格

[1]https://www.codetd.com/article/4295226
[2]http://www.edianedi.com/index.php/archives/23/