为什么自己搭建的hadoop集群 只有1个datanode

举报
tscswcn 发表于 2019/01/27 00:01:55 2019/01/27
【摘要】 经过 诊断 是 因为 集群重新 格式化过dfs/name/current/VERSION记录的内容跟实际 集群的ID 不一样,datanode 能启动[root@vm112 current]# cat /opt/hadoop-2.8.4/tmp1/dfs/name/current/VERSION#Sat Jan 26 21:36:39 CST 2019namespaceID=14236026...

经过 诊断 是 因为 集群重新 格式化过


dfs/name/current/VERSION

记录的内容跟实际 集群的ID 不一样,datanode 能启动


[root@vm112 current]# cat /opt/hadoop-2.8.4/tmp1/dfs/name/current/VERSION

#Sat Jan 26 21:36:39 CST 2019

namespaceID=1423602679

clusterID=CID-453f2884-c5a6-46ac-8679-d20cdd4eb0d9

cTime=1548509799533

storageType=NAME_NODE

blockpoolID=BP-1600261256-10.3.3.132-1548509799533

layoutVersion=-63

[root@vm112 current]#


而集群 ID  CID-3d553389-e529-4281-9a71-348e37298c75


我试图把VERSION 文件修改,结果重启,结果1个datanode 都每起来,

我重新删除了一些目录,重新格式了 hdfs namenode -format, 并且 保证 datanode 上没有 旧的集群信息,start-all.sh 可以正常启动了

image.png

【版权声明】本文为华为云社区用户原创内容,转载时必须标注文章的来源(华为云社区)、文章链接、文章作者等基本信息, 否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。