关于Storm的高可用，有以下几个方面： (1)数据利用阶段可以通过ACK机制保证数据被处理； (2)在进程级别，worker失效，supervisor会自动重启worker线程; (3)在组件级别，supervisor节点失效，会在其他节点重启该supervisor任务； 但是一个很大...
分类：
其他好文 时间：
2015-04-03 12:55:20
阅读次数：
198
supervisor启动worker源码分析-worker.clj
分类：
其他好文 时间：
2015-04-03 10:54:56
阅读次数：
202
徐明明博客：Twitter Storm源代码分析之ZooKeeper中的目录结构 我们知道Twitter Storm的所有的状态信息都是保存在Zookeeper里面，nimbus通过在zookeeper上面写状态信息来分配任务，supervisor，task通过从zookeeper中读状态来领取任....
分类：
其他好文 时间：
2015-04-02 16:20:44
阅读次数：
178
SUPERVISOR进程管理器配置指南 1. supervisor简介 1.1. 官网 http://supervisord.org/ 1.2. 介绍 Supervisor是一个进程控制系统. 它是一个C/S系统(注意: 其提供WEB接口给用户查询和控制), 它允许用户去监控和控制...
分类：
系统相关 时间：
2015-04-02 13:33:50
阅读次数：
208
1.问题描述
需要一个python的服务程序在后台一直运行，不能让该进程被杀死，即使被杀死也要能及时自动重启。如：有一个python的程序：test.py ，通过命令：python test.py来运行程序，但是它会受命令行的中断而中断。所以我们需要一个方法来保证该程序一直在后台运行。
2.解决方法
以前经常用命令：nohup python test.py & 来保证其在...
分类：
编程语言 时间：
2015-03-30 21:18:15
阅读次数：
353
本文讲解了Storm故障容忍性(Fault-Tolerance)的设计细节：当Worker、节点、Nimbus或者Supervisor出现故障时是如何实现故障容忍性，以及Nimbus是否存在单点故障问题。当一个Worker挂了会怎样？When a worker dies, the superviso...
分类：
其他好文 时间：
2015-03-30 13:00:26
阅读次数：
172
【原】storm源码之一个class解决nimbus单点问题一、storm nimbus 单节点问题概述1、storm集群在生产环境部署之后，通常会是如下的结构： 从图中可以看出zookeeper和supervisor都是多节点，任意1个zookeeper节点宕...
分类：
其他好文 时间：
2015-03-28 22:59:02
阅读次数：
181
全局添加supervisor 动态监测改变打开app.js
分类：
其他好文 时间：
2015-03-19 23:38:16
阅读次数：
102
机房断电，所有服务器的重启了，在重新启动storm，nimbus和ui都成功启动了，supervisor总是启动失败，报什么EOF的错误，百度了很久，说在conf/storm.yaml文件中，删除配置的storm.local.dir目录下的所有文件，我认为nimbus和ui都启动成功，就只删除了supervisor的文件夹，结果..
分类：
其他好文 时间：
2015-03-19 16:31:48
阅读次数：
2886
题意：Nick's company employednpeople. Now Nick needs to build a tree hierarchy of «supervisor-surbodinate» relations in the company (this is to say that ...
分类：
其他好文 时间：
2015-03-11 16:54:39
阅读次数：
146
