经验首页 前端设计 程序设计 Java相关 移动开发 数据库/运维 软件/图像 大数据/云计算 其他经验
当前位置:技术经验 » 大数据/云/AI » Hadoop » 查看文章
启动hadoop之后,主节点启动了,而从节点的datanode并没有启动的问题
来源:cnblogs  作者:男神睛  时间:2021/5/6 17:32:19  对本文有异议

记录以下遇到的这个问题2021.4.29

问题的起因还是在于hadoop安全模式的问题,我的安全模式之前出了问题,丢失了数据,
导致我每次启动hadoop集群,都需要自己手动关闭hadoop的安全模式,
于是在网上搜索,找到说可以先关闭集群,然后格式化namenode,
按照这样的方式做了以后,就出现了标题的问题。

解决方法其实也很简单

因为格式化的问题,导致了主节点和从节点的clusterId不一致,所以才导致datanode没有启动成功

进入到你的集群的current目录下去找VERSION这个文件

  1. #namenode的文件路径
  2. /usr/local/soft/hadoop-2.7.6/tmp/dfs/name/current
  3. #datanode的文件路径
  4. /usr/local/soft/hadoop-2.7.6/tmp/dfs/data/current
  5. [root@node1 current]# ll
  6. 总用量 4
  7. drwx------. 4 root root 54 4 29 09:49 BP-313352401-192.168.237.110-1618028972295
  8. drwx------. 4 root root 54 4 29 13:16 BP-624032164-192.168.237.110-1619672787499
  9. -rw-r--r--. 1 root root 229 4 29 13:16 VERSION
  10. vi VERSION
  11. 修改你的datanodeclusterIdname相同目录下的clusterId 保持一致,即可解决这个问题

修改的clusterId如下图所示,你的namenode下也会有一个这个,打开,并和你的从节点对比,修改为和namenode的clusterId一致即可解决问题
image.png

原文链接:http://www.cnblogs.com/zggpdd/p/14717605.html

 友情链接:直通硅谷  点职佳  北美留学生论坛

本站QQ群:前端 618073944 | Java 606181507 | Python 626812652 | C/C++ 612253063 | 微信 634508462 | 苹果 692586424 | C#/.net 182808419 | PHP 305140648 | 运维 608723728

W3xue 的所有内容仅供测试,对任何法律问题及风险不承担任何责任。通过使用本站内容随之而来的风险与本站无关。
关于我们  |  意见建议  |  捐助我们  |  报错有奖  |  广告合作、友情链接(目前9元/月)请联系QQ:27243702 沸活量
皖ICP备17017327号-2 皖公网安备34020702000426号