前言 ZooKeeper是Hadoop家族的一款高性能的分布式协作的产品。在单机中,系统协作大都是进程级的操作。分布式系统中,服务协作都是跨服务器才能完成的。在ZooKeeper之前,我们对于协作服务大都使用消息中间件,随...
分类:
其他好文 时间:
2014-08-25 17:23:04
阅读次数:
297
看了你的问题, 我还特意的查看了ZooKeeper的启动脚本代码。ZooKeeper启动脚本没有加任何参数,也就是使用jvm默认的。如果想要加大ZooKeeper的JVM使用内存。可以在更改{ZK_HOME}/bin/zkServer.sh,大约在109-110行。?12nohup $JAVA "-...
分类:
其他好文 时间:
2014-08-24 10:13:02
阅读次数:
249
因官方Book Performance Tuning部分章节没有按配置项进行索引,不能达到快速查阅的效果。所以我以配置项驱动,重新整理了原文,并补充一些自己的理解,如有错误,欢迎指正。配置优化zookeeper.session.timeout默认值:3分钟(180000ms)说明:RegionSer...
分类:
其他好文 时间:
2014-08-23 15:14:51
阅读次数:
191
利用puppet管理solrcloud主脚本1./etc/puppet/manifests/zookeeper.pp/*vimset:expandtab:shiftwidth=4:tabstop=4:smarttab:*/#=globalvar#=sae#=cron#=user#=account#=stdlib#=zookeeper#=solr#=jettynode/sae$/{includeglobalvarincludeglobalvar::userincludeaccount::lists..
分类:
其他好文 时间:
2014-08-22 18:08:09
阅读次数:
327
1、如果你装了带有zookeeper的Hbase版本,先把hbase-env.sh export HBASE_MANAGES_ZK=false 设置为false 见下图
2、下载安装zookeeper(地址:http://www.apache.org/dyn/closer.cgi/zookeeper/)
3、解压包到指定的目录(例如:/usr/zookeeper)tar X...
分类:
其他好文 时间:
2014-08-22 16:20:59
阅读次数:
250
Curator提供了对zookeeper客户端的封装,并监控连接状态和会话session,特别是会话session过期后,curator能够重新连接zookeeper,并且创建一个新的session。对于zk的使用者来说,session的概念至关重要,如果想了解更多session的说明,请访问:ht...
分类:
其他好文 时间:
2014-08-22 15:49:49
阅读次数:
298
Zookeeper连接后验证节点是否存在 初学Zookeeper,在配置完集群之后,为了验证集群对于某台机器挂掉之后的影响,出现了一下问题。 集群由3台机器组成,通过“sh bin/zkServer.sh stop”关闭了其中一台(ip1)。 然后在以下代码中测试: // 创...
分类:
其他好文 时间:
2014-08-22 12:34:16
阅读次数:
546
集群中3个节点,第一个started,第二个说Starting zookeeper ... already running as process xxxx,第三个说Starting zookeeper ... already running as process yyyy。原来是相应目录下残留的pi...
分类:
其他好文 时间:
2014-08-22 10:45:25
阅读次数:
1111
阅读背景:1 您需要了解什么是dubbo,如何使用dubbo拆分服务 ? ? ? ? ? ? ? ? 2:您需要了解如何将所需要的服务注册到dubbo ? ? ?????????? ?3: 您还可能需要了解如何使用zookeeper 本章主...
分类:
其他好文 时间:
2014-08-21 15:23:14
阅读次数:
216
Nimbus :负责资源分配和任务调度, 把任务相关的元信息写入Zookeeper 相应目录。
Supervisor :负责接受nimbus 分配的任务,启动和停止属于自己管理的worker 进程。
Worker :运行具体处理组件逻辑的进程。
Executor :运行spout/bolt 的线程
Task : worker 中每一个spout/bolt 的线程称为一个task.
Topology : storm 中运行的实时应用程序,消息在各个组件间流动形成逻辑上的拓扑结构。
Spout :在一个topo...
分类:
其他好文 时间:
2014-08-20 12:39:12
阅读次数:
171