无意将hdfs上的hbase文件(hbase的rootDir为hdfs:master1:9000/hbase)删掉了,重启hbase和ZK都不行 解决方案:使用hbase的ZK 即设置 hbase-env.sh 中的 ?HBASE_MANAGES_ZK 为 true 在重启hbase 即可生成hbase文...
分类:
其他好文 时间:
2014-10-11 21:04:37
阅读次数:
274
详细记录基于Hadoop2.5.1的集群的安装过程,集群组件包含:JDK、Hadoop、Hive、ZK、MySql、Sqoop,并记录安装过程中遇到的问题及解决方案。...
分类:
其他好文 时间:
2014-10-08 14:14:35
阅读次数:
373
使用ZK作为HA方案的Master是如何快速故障恢复的呢?本文为你详细解读。最后给出的流程图,可以清楚的理解恢复过程的数据流程和处理逻辑。...
分类:
其他好文 时间:
2014-10-05 05:11:27
阅读次数:
252
3 常用命令3.1. 启动ZK服务: bin/zkServer.sh start3.2. 查看ZK服务状态: bin/zkServer.sh status3.3 停止ZK服务: bin/zkServer.sh stop3.4. 重启ZK服务: bin/zkServer.sh restart 3.5 ...
分类:
其他好文 时间:
2014-09-28 12:18:41
阅读次数:
128
依赖:主要是zk的client:kazooimport os, sys, subprocess,timeimport threadingfrom kazoo.client import KazooClientfrom kazoo.exceptions import *定制参数:#指定是memcach...
分类:
其他好文 时间:
2014-09-26 10:52:38
阅读次数:
228
总结:
???1.kafka?中可以分步不同的组,消息可以被不同组里面的消费者多次消费
???2.?观察zookeeper中kafka中的信息:
[zk:?air00:2181(CONNECTED)?8]?ls?/
[consumers,?config,?controller,?adm...
分类:
其他好文 时间:
2014-09-25 16:08:39
阅读次数:
209
历时两年,基于Java Zk框架的CRM系统终于在个人不懈努力下,开发完成。传承曾经连续在中国CRM市场上占有率第一某品牌产品理念开发,从php到Java,从风生水起到并购,从立项到战略撤项,为了不让其胎...
分类:
其他好文 时间:
2014-09-25 04:00:48
阅读次数:
277
https://issues.apache.org/jira/secure/attachment/12436620/ZooInspector.zip运行解压缩后点击ZooInspector\build\zookeeper-dev-ZooInspector.jar后会出现以下界面连接ZK点击左上角的绿...
分类:
系统相关 时间:
2014-09-15 00:56:07
阅读次数:
259
分布式系统的现状,难以区分一个响应慢的节点和一个死掉的节点,所有的rpc流程都是基于timeout机制,我们期望更少的超时时间,则意味着有更高的误判率,误判的情况下hbase容错性虽然很好,但总要付出一些数据恢复的代价。 故障恢复主要牵涉到的组件有zk,hmaster namenode。zk承担锁....
分类:
其他好文 时间:
2014-09-12 16:47:23
阅读次数:
414
登录提示需要输入以下是解决此问题的方法,希望大家记祝如果以后有碰到这样的情况,你就可以按照以下方法解决此类问题了。第一步、安装access数据库首先你的电脑中要安装有ACCESS这个数据库,一般ACCESS数据库在安装office2000/2003时都有一个自定义安装,选择了ACCESS,那么当..
分类:
其他好文 时间:
2014-09-01 15:55:44
阅读次数:
628