Hadoop錯誤:java.io.IOException: Incompatible clusterIDs
問題:
配置Hadoop叢集時,一個節點的DataNode無法啟動
排查:
檢視hadoop-root-datanode-bigdata114.log檔案,錯誤資訊如下:
java.io.IOException: Incompatible clusterIDs in /root/training/hadoop-2.7.3/tmp/dfs/data:
namenode clusterID = CID-947a48a2-56aa-4566-85d6-b5987d0bfeca; datanode clusterID = CID-8c75bd62-98f6-4482-85f3-865cb9a0f70f
解決:
開啟 /root/training/hadoop-2.7.3/tmp/dfs/data/current 下的VERSION檔案(/tmp 是在 core-site.xml 中設定的hadoop臨時目錄):
#Thu Dec 13 00:00:49 CST 2018
storageID=DS-e242ac88-5b0f-402c-b138-7e29f583ec82
clusterID=CID-8c75bd62-98f6-4482-85f3-865cb9a0f70f
cTime=0
datanodeUuid=2ddcdd2a-9f76-4e3e-8cc3-9b9d44448936
storageType=DATA_NODE
layoutVersion=-56
將clusterID修改為CID-947a48a2-56aa-4566-85d6-b5987d0bfeca 即可
相關推薦
Hadoop錯誤:java.io.IOException: Incompatible clusterIDs
問題: 配置Hadoop叢集時,一個節點的DataNode無法啟動 排查: 檢視hadoop-root-datanode-bigdata114.log檔案,錯誤資訊如下: java.io.IOException: Incompatible clusterIDs in /root/tra
hadoop錯誤:java.io.IOException: Incompatible namespaceIDs in /hadoop/data: namenode namespaceID
hadoop的datanode啟動失敗,檢視日誌顯示:的2018-06-12 13:49:03,075 ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: java.io.IOException: Incompatib
bug:datanode啟動後立刻死掉:java.io.IOException: Incompatible clusterIDs in....
java.io.IOException: Incompatible clusterIDs in /usr/local/hadoop/hadoop-2.6.0/data/tmp/dfs/data: namenode clusterID = CID-c602bccc-3af9-431d-8391-f57b966
現象:頁面開啟一片空白,相應慢 日誌列印錯誤:java.io.IOException: Connection reset by peer
解決方法:重啟tomcat。Connection reset 會在客戶端不知道 channel 被關閉的情況下, 觸發了 eventloop 的 unsafe.read() 操作丟擲問題出現原因:(轉載)這個異常是由於以下幾個原因造成。1、客戶端再發起請求後沒有等伺服器端相應
ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: java.io.IOException: Incompatible namespaceID
問題的產生: 今天遇到了一個問題 我執行了 https://blog.csdn.net/lzc4869/article/details/Hadoop namenode -format 之後 啟動hadoop: https://blog.csdn.net/lzc4869/art
hadoop上傳檔案錯誤org.apache.hadoop.ipc.RemoteException(java.io.IOException)
部落格引用處(以下內容在原有部落格基礎上進行補充或更改,謝謝這些大牛的部落格指導): hadoop上傳檔案錯誤org.apache.hadoop.ipc.RemoteException(java.io.IOException) 搭建好hadoop後使用hadoop fs -put 命令上
解決:java.io.IOException: No FileSystem for scheme: hdfs
java system -c 讀取配置 發現 無奈 com 過程 新版 解決:java.io.IOException: No FileSystem for scheme: hdfs 開發項目初期,寫完代碼開始放到服務器上開始測試的時候,報出這樣的一個錯,不知道怎麽處理了,嘗
hiveMetastore元資料庫初始化失敗:java.io.IOException: Schema script failed, errorcode 2
Traceback (most recent call last): File "/var/lib/ambari-agent/cache/common-services/HIVE/0.12.0.2.0/package/scripts/hive_metastore.py", line
sqoop報錯:java.io.IOException: SQLException in nextKeyValu
sqoop從mysql導資料到hive的時候,報錯: java.io.IOException: SQLException in nextKeyValue at org.apache.sqoop.mapreduce.db.DBRecordReader.nextKeyValue(DBRecor
datanode報錯:java.io.IOException:Premature EOF from inputStream
HDSF datanode報錯如下: 原因:檔案操作超租期,實際上就是data stream操作過程中檔案被刪除了,通常是因為Mapred多個task操作同一個檔案,一個task完成後刪掉檔案導致。這個錯誤跟dfs.datanode.max.transfer.thread
mina通訊,對於高併發的產生:java.io.IOException: Too many open files(開啟檔案控制代碼過多問題)
起因:由於業務系統有多個定時任務定時訪問銀行端,銀行每天也有大量業務訪問業務系統,都是通過mina通訊,部署在測試環境的系統每過一兩天開啟控制代碼過萬,生產的也是一週左右不重啟業務系統就會爆掉。一開始並不清楚到底是哪方面原因導致控制代碼增長這麼快,因為這是一個老系統,經過多次升級,大量的併發、多執行緒,所以只
解決:java.io.IOException: invalid constant type: 15
啟動 dubbo 服務報錯: java.io.IOException: invalid constant type: 15 我的情況是專案本身 是用的1.7 。而我自己用的是 JDK 1.8
org.apache.hadoop.ipc.RemoteException(java.io.IOException)異常
最近在除錯flink程式時,發現程式起不來,檢視錯誤日誌和hadoop相關,我的程式與hadoop相關的只有設定了checkpoint的路徑是hdfs的一個目錄路徑。 錯誤日誌最後的錯誤大致是: org.apache.hadoop.i
Android7.0以上File.createTempFile異常:java.io.IOException: Unable to create temporary file
一.File.createTempFile的介紹 java IO中常用類File 有File.createTempFile(String prefix, String suffix, File directory) 方法會在指定的目錄中一個新的空檔案。 de
Android:java.io.IOException: Cannot run program "/system/xbin/su": error=13, Permission denied
java.io.IOException: Cannot run program "/system/xbin/su": error=13, Permission denied 我的情況 同一套App程式,之前跑在Android4.0中沒有這個問題,這個問題是
APICloud Webstorm WiFi日誌輸出報錯:java.io.IOException: Couldn't create PTY
諮詢,合作郵箱: [email protected] GitHub: https://github.com/DeMonLiu623 由於之前整理GitHub,刪除了一些專案,所以導致部分程式碼連結失效。如有需要,請留言,或者私信! 另外:由於CSDN的下載積分會
jenkins error:java.io.IOException: Failed to create a directory at ...
ERROR: Failed to parse POMs java.io.IOException: Failed to create a directory at /var/lib/jenkins/jobs/game_center_dashboard_test/m
android studio 錯誤:“java.io.EOFException”
大概一週前吧,執行Android應用的時候突然報“java.io.EOFException”,報錯的地方是在JsonReader裡面,當時第一懷疑物件就是後臺的小夥伴改了什麼東西,導致返回的json格式出問題了,然後各種除錯,查資料,版本回退,後臺返回資料寫死等
【Hbase異常】windows 中使用hbase 異常:java.io.IOException: Could not locate executable null\bin\winutils.exe
平時一般是在windows環境下進行開發,在windows 環境下操作hbase可能會出現異常(java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoo
高並發連接導致打開文件過多:java.io.IOException: Too many open files 解決方法
限制 security 打開文件 soft api too limit com inf 用 CentOS 做 API 接口服務器供其他終端調用時,並發量高會報錯:java.io.IOException: Too many open files。 其原因是在 Linux 下