码迷,mamicode.com
首页 > 其他好文 > 详细

namenode gc故障及解决办法记录

时间:2018-06-01 11:35:48      阅读:895      评论:0      收藏:0      [点我收藏+]

标签:namenode

问题:
WARN org.apache.hadoop.hdfs.qjournal.client.QuorumJournalManager: Waited 19016 ms (timeout=20000 ms) for a response for sendEdits. Succeeded so far: [10.80.248.17:8486]

namenode gc overhead limit exceeded
原因:
1,网络原因-检查正常,如果延误可设置 hdfs-site.xml dfs.qjournal.write-txns.timeout.ms=60000
2,JVM GC的原因,分析可能集群运行久了,元数据信息增长导致超过内存配置,一般JVM都有内存限制;
查找发现 默认namenode内存的大小为1000M
修改:hadoop-env.sh
export HADOOP_HEAPSIZE=20
启动namenode正常使用。

namenode gc故障及解决办法记录

标签:namenode

原文地址:http://blog.51cto.com/13780276/2122727

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!