博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
启动Hadoop没有dataNode进程的解决办法
阅读量:3960 次
发布时间:2019-05-24

本文共 567 字,大约阅读时间需要 1 分钟。

1.问题现象:

在启动Hadoop时,通过jps目录发现没有datanode进程。

[root@hadoop ~]# jps1792 SecondaryNameNode1937 Jps1650 DataNode

2 解决方案:clusterID不匹配导致的问题

网上搜了下,网上的说法都是由于进行hadoop格式化的时候没有事先结束所有进程,或者多次进行了format导致的datanode的clusterID 和 namenode的clusterID不匹配,从而在启动后没有datanode进程。

解决方法有两种:

方案一: 保留现有数据
用NameNode节点的~/dfs/name/current/VERSION 中的namenode的clusterID替换所有datanode节点机器中~/dfs/data/current/VERSION中的clusterID。
重启启动hadoop:start-all.sh
这种方式不影响现有的数据,避免了重新的格式化。

方案二: 重新格式化

执行./stop-all.sh关闭集群
删除存放hdfs数据块的文件夹(hadoop/tmp/),然后重建该文件夹
删除hadoop下的日志文件logs
执行hadoop namenode -format格式化hadoop
重启hadoop集群

转载地址:http://hnmzi.baihongyu.com/

你可能感兴趣的文章
docker上传镜像至Registry时https报错解决方法
查看>>
安装 docker-compose (实测可用,妈妈再也不用担心被墙了)
查看>>
docker下删除none的images
查看>>
Linux提权获取敏感信息方法
查看>>
Ubuntu 16.04开机A start job is running for Raise network interface(5min 4s)解决方法
查看>>
Ubuntu 16.04开机隐藏菜单缩短时间
查看>>
Ubuntu 更换国内源
查看>>
Ubuntu16.04下Docker pull connection refused 解决办法
查看>>
通过 三大机制 揭秘 IPFS 工作原理
查看>>
Ubuntu 16.04卸载PostgresQL
查看>>
华为路由器交换机配置命令
查看>>
docker下运行kalilinux并配置ssh访问
查看>>
使用 Docker 容器应该避免的 10 个事情
查看>>
postgres基本操作(个人总结版)
查看>>
求数组中最长递增子序列
查看>>
用C++设计一个不能被继承的类
查看>>
linux core文件机制
查看>>
私有继承中的派生类对象与基类对象间的转换
查看>>
5.7 观察者模式observer(行为模式)
查看>>
建造者模式Builder(创建模式)
查看>>