NameNode手动恢复
@人工智能会与人类携手共进
QingSao之大数据学习
大家好,我是QingSao,是一名大二的数据科学与大数据技术,今天给大家分享的是如何手动的恢复NameNode节点。
配置集群
我感觉我自己挺笨的,在配置集群的时候,总是爱出现问题,经过不断的去尝试和不断的解决问题,我对搭建Hadoop集群应该算是轻车熟路,所以只要我们不断的去解决问题,以前是搭虚拟机,到现在的我是搭Hadoop集群的完全分布式,出现了很多的问题。
现在的我可以根据配置集群规划表来独立的完成集群的搭建。
NameNode恢复
(1)以前的我在出现NameNode、DataNode宕机的时候,我总是用hdfs namenode -format来格式化最终来实现集群的启动。
(2)使用cluster-ID来恢复DataNode
需要把每个节点的ID都改成一样的.
查看112的进程
查看DataNode所在的112上查看logs
查看logs的时候是以log结尾的那个文件在相对应的节点上去查找错误
根据指示的错误把所有的节点的DataNode的cluster-ID改成一致就可以启动DataNode了。
查看web网页