Hadoop 故障整理
生活随笔
收集整理的這篇文章主要介紹了
Hadoop 故障整理
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
1、關于DataNode 錯誤信息解析
錯誤內容
java.io.IOException: Incompatible clusterIDs in /opt/hadoop/dfs/data: namenode clusterID = CID-40d92cfa-751c-4589-b89c-43f90751214b; datanode clusterID = CID-fe4d7495-2157-4bc2-9f03-5bdade0be587原因及處理方法
原因: 由于多次 format 導致, NameNode 節點 clusterID值與DataNode 節點clusterID 值不相等。處理方法:1、 修改 DataNode 節點的 clusterID 與 NameNode clusterID 值相等。2、修改文件位置:例:/opt/hadoop/dfs/data/current/VERSION
3、VERSION 文件內容如下:storageID=DS-3fab65fb-ec2b-495c-831d-bb59151f7788clusterID=CID-40d92cfa-751c-4589-b89c-43f90751214bcTime=0datanodeUuid=211d8c5d-edd9-4bc7-90e6-5ac17c129debstorageType=DATA_NODElayoutVersion=-56
?
轉載于:https://www.cnblogs.com/jiejunwang/p/10521144.html
總結
以上是生活随笔為你收集整理的Hadoop 故障整理的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: mysqldumpslow基本使用
- 下一篇: PTA 1067 Sort with S