執行hadoop程式時，有時候會報以下錯誤：

org.apache.hadoop.dfs.SafeModeException: Cannot delete /user/hadoop/input. Name node is in safe mode
這個錯誤應該還滿常見的吧（至少我執行的時候是這樣的）

那我們來分析下這個錯誤，從字面上來理解：
Name node is in safe mode

說明Hadoop的NameNode處在安全模式下。
那什麼是Hadoop的安全模式呢？
在分散式檔案系統啟動的時候，開始的時候會有安全模式，當分散式檔案系統處於安全模式的情況下，檔案系統中的內容不允許修改也不允許刪除，直到安全模式結束。安全模式主要是為了系統啟動的時候檢查各個DataNode上資料塊的有效性，同時根據策略必要的複製或者刪除部分資料塊。執行期通過命令也可以進入安全模式。在實踐過程中，系統啟動的時候去修改和刪除檔案也會有安全模式不允許修改的出錯提示，只需要等待一會兒即可。

現在就清楚了，那現在要解決這個問題，我想讓Hadoop不處在safe mode 模式下，能不能不用等，直接解決呢？
答案是可以的，只要在Hadoop的目錄下輸入：
bin/hadoop dfsadmin -safemode leave

也就是關閉Hadoop的安全模式，這樣問題就解決了。

之前在hadoop執行過程中使用了"ctrl+c"操作
再次使用hadoop時出現“Name node is in safe mode”提示：
[email protected]:~/hadoop/hadoop-0.20.2# bin/hadoop fs -put conf input
put: org.apache.hadoop.hdfs.server.namenode.SafeModeException: Cannot create directory /user/root/input/conf. Name node is in safe mode.

－－－－－－－－－－－－－－－－－－－－－－－－－－－－－
 

bin/hadoop dfsadmin -safemode leave
就可以把safemode解除，為了這個問題煩惱了好久Orz
－－－－－－－－－－－－－－－－－－－－－－－－－－－－－
safemode模式
NameNode在啟動的時候首先進入安全模式，如果datanode丟失的block達到一定的比例（1-dfs.safemode.threshold.pct），則系統會一直處於安全模式狀態即只讀狀態。
dfs.safemode.threshold.pct（預設值0.999f）表示HDFS啟動的時候，如果DataNode上報的block個數達到了元資料
 
記錄的block個數的0.999倍才可以離開安全模式，否則一直是這種只讀模式。如果設為1則HDFS永遠是處於SafeMode。
下面這行摘錄自NameNode啟動時的日誌（block上報比例1達到了閥值0.9990）
The ratio of reported blocks 1.0000 has reached the threshold 0.9990. Safe mode will be turned off automatically in 18 seconds.
hadoop dfsadmin -safemode leave
有兩個方法離開這種安全模式
 1. 修改dfs.safemode.threshold.pct為一個比較小的值，預設是0.999。
 2. hadoop dfsadmin -safemode leave命令強制離開
http://bbs.hadoopor.com/viewthread.php?tid=61&extra=page%3D1
－－－－－－－－－－－－－－－－－－－－－－－－－－－－－
Safe mode is exited when the minimal replication condition is reached, plus an extension
time of 30 seconds. The minimal replication condition is when 99.9% of the blocks in
the whole filesystem meet their minimum replication level (which defaults to one, and
is set by dfs.replication.min).
安全模式的退出前提 - 整個檔案系統中的99.9%（預設是99.9%，可以通過dfs.safemode.threshold.pct設定）的Blocks達到最小備份級別(預設是1，可以通過dfs.replication.min設定)。
dfs.safemode.threshold.pct       float        0.999 
The proportion of blocks in the system that must meet the minimum
replication level defined by dfs.rep lication.min before the namenode
will exit safe mode. Setting
this value to 0 or less forces the name-node not to start in safe mode.
Setting this value to more than 1 means the namenode never exits safe
mode.
－－－－－－－－－－－－－－－－－－－－－－－－－－－－－
使用者可以通過dfsadmin -safemode value   來操作安全模式，引數value的說明如下：
enter - 進入安全模式
leave - 強制NameNode離開安全模式
get -   返回安全模式是否開啟的資訊
wait - 等待，一直到安全模式結束。

描述：在window下使用Eclipse進行hadoop的程式編寫，然後Run on hadoop 後，出現如下錯誤：

11/10/28 16:05:53 INFO mapred.JobClient: Running job: job_201110281103_0003 11/10/28 16:05:54 INFO mapred.JobClient: map 0% reduce 0% 11/10/28 16:06:05 INFO mapred.JobClient: Task Id : attempt_201110281103_0003_m_000002_0, Status : FAILED org.apache.hadoop.security.AccessControlException: org.apache.hadoop.security.AccessControlException: Permission denied: user=DrWho, access=WRITE, inode="hadoop":hadoop:supergroup:rwxr-xr-x at sun.reflect.NativeConstructorAccessorImpl.newInstance0(Native Method) at sun.reflect.NativeConstructorAccessorImpl.newInstance(NativeConstructorAccessorImpl.java:39)

解決方法：

　　到伺服器上修改hadoop的配置檔案：conf/hdfs-core.xml, 找到 dfs.permissions 的配置項 , 將value值改為 false

<property> <name>dfs.permissions</name> <value>false</value> <description> If "true", enable permission checking in HDFS. If "false", permission checking is turned off, but all other behavior is unchanged. Switching from one parameter value to the other does not change the mode, owner or group of files or directories. </description> </property>

修改完貌似要重啟下hadoop的程序才能生效

開發環境:win xp sp3 ,   Eclipse 3.3  ,   hadoop-0.20.2    

hadoop伺服器部署環境： ubuntu 10.10  ,   hadoop-0.20.2  

小結:  接觸Hadoop沒多久，不知道這樣修改對叢集的安全性有啥影響。

//補充：

後來google到一篇文章，解釋了錯誤出現的原因，原文地址如下：

因為Eclipse使用hadoop外掛提交作業時，會預設以 DrWho 身份去將作業寫入hdfs檔案系統中，對應的也就是 HDFS 上的/user/xxx ,

我的為/user/hadoop ,   由於 DrWho 使用者對hadoop目錄並沒有寫入許可權，所以導致異常的發生。他提供的解決方法為：

放開 hadoop 目錄的許可權 ， 命令如下 ：$ hadoop fs -chmod 777 /user/hadoop 

啟動Hadoop時報了一個警告資訊，我安裝的Hadoop版本是hadoop1.2.1，具體警告資訊如下：

Shell程式碼  

1. [[email protected] hadoop-1.2.1]# ./bin/start-all.sh   
2. Warning: $HADOOP_HOME is deprecated.  

 網上的說法是因為Hadoop本身對HADOOP_HOME做了判斷，具體在bin/hadoop和bin/hadoop-config.sh裡。在hadoop-config.sh裡有如下的配置： 

Shell程式碼  

1. if [ "$HADOOP_HOME_WARN_SUPPRESS" = "" ] && [ "$HADOOP_HOME" != "" ]; then  
2.   echo "Warning: \$HADOOP_HOME is deprecated."1>&2
3.   echo 1>&2
4. fi  

 對於這個警告問題，解決方法如下： 

1.註釋掉hadoop-config.sh裡的上面給出的這段if fi配置（不推薦）

2.增加一個環境變數：/etc/profile

export HADOOP_HOME_WARN_SUPPRESS=1

注：修改完後需要執行source操作使其生效

Shell程式碼  

1. [[email protected] ~]# source /etc/profile 

 執行完後我們可以檢驗一下配置是否成功，重新執行start-all.sh指令碼：

Shell程式碼  

1. [[email protected] hadoop-1.2.1]# ./bin/start-all.sh   
2. starting namenode, logging to /root/hadoop-1.0.4/libexec/../logs/hadoop-root-namenode-localhost.out  
3. localhost: starting datanode, logging to /root/hadoop-1.0.4/libexec/../logs/hadoop-root-datanode-localhost.out  
4. localhost: starting secondarynamenode, logging to /root/hadoop-1.0.4/libexec/../logs/hadoop-root-secondarynamenode-localhost.out  
5. starting jobtracker, logging to /root/hadoop-1.0.4/libexec/../logs/hadoop-root-jobtracker-localhost.out  
6. localhost: starting tasktracker, logging to /root/hadoop-1.0.4/libexec/../logs/hadoop-root-tasktracker-localhost.out  

 沒有出現Warning: $HADOOP_HOME is deprecated，說明問題已經解決。

如果遇到Exception in thread "main" java.lang.IllegalArgumentException: Wrong FS: hdfs expected: file:///之類的異常，需要將${hadoop.root}/conf/目錄的hadoop配置檔案core-site.xml、hdfs-site.xml、mapred-site.xml拷貝到eclipse專案的bin目錄裡面

ermission denied: user=root, access=WRITE, inode="hadoop":hadoop:supergroup:rwxr-xr-x

org.apache.hadoop.security.AccessControlException: org.apache.hadoop.security.AccessControlException: Permission denied: user=root, access=WRITE, inode="hadoop":hadoop:supergroup:rwxr-xr-x

<pre name="code" id="best-content-1006820699" class="best-text mb-10" style="margin-top:0px; margin-bottom:10px; padding:0px; font-family:arial,'courier new',courier,宋體,monospace; white-space:pre-wrap; word-wrap:break-word; color:rgb(51,51,51); font-size:14px; line-height:24px; background-color:rgb(241,254,221)">提示往HDFS寫檔案是不容許的

在conf/hdfs-site.xml中加入

<pre name="code" id="best-content-1006820699" class="best-text mb-10" style="margin-top:0px; margin-bottom:10px; padding:0px; font-family:arial,'courier new',courier,宋體,monospace; white-space:pre-wrap; word-wrap:break-word; color:rgb(51,51,51); font-size:14px; line-height:24px; background-color:rgb(241,254,221)"><property>
<name>dfs.permissions</name>
<value>false</value>
</property>