码迷,mamicode.com
首页 > 其他好文 > 详细

【TODO】模拟namenode崩溃并恢复

时间:2014-08-05 19:43:40      阅读:197      评论:0      收藏:0      [点我收藏+]

标签:style   blog   http   color   java   os   io   文件   

TODO: 还有没搞清楚的地方。


1、为了方便演示,先做好namenode检查点的配置。见控制namenode检查点发生的频率

2、启动hadoop,保证所有节点都正常。

3、将namenode节点上dfs.name.dir 指定目录(即 name 目录)中的内容全部删除,以模拟故障发生情况。

4、关闭hadoop,jps查看,发现namenode没有启动成功。

  • 查看namenode节点的$HADOOOP_HOME/logs/目录下namenode的日志,发现异常:java.io.IOException: NameNode is not formated。

  • 同时,查看hdfs上的目录及文件情况,ls后发现报错

5、关闭hadoop,重新格式化namenode

6、进入namenode节点的dfs.name.dir 指定目录(即 name 目录),发现已经生成了新的内容。编辑current中的VERSION。将namespaceID的值改为集群中任一datanode中的namespaceID(即原来的值)

7、删除current中新生成的fsimage

8、将secondarynamenode的fsimage拷贝过来。

注意:我拷贝的是namesecondary/image/目录下的。网上有资料说是namesecondary/current下的,但我的current中并没有内容。

9、启动hadoop

10、启动完毕发现一切正常了。


【TODO】模拟namenode崩溃并恢复,布布扣,bubuko.com

【TODO】模拟namenode崩溃并恢复

标签:style   blog   http   color   java   os   io   文件   

原文地址:http://my.oschina.net/allman90/blog/298159

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!