1.背景知识在不修改Storm任何源代码的情况下,让Storm运行在YARN上,最简单的实现方法是将Storm的各个服务组件(包括Nimbus和Supervisor),作为单独的任务运行在YARN上,当前比较有名的“Storm On YARN”实现是由yahoo!开源的,它基本实现了上述描述的功能,...
分类:
其他好文 时间:
2014-07-06 21:47:31
阅读次数:
266
唔,听说过这四个牛逼渣渣的behaviour:gen_server,gen_fsm,gen_event,supervisor。所以也就更加好奇behaviour的实现。在解释它是怎么工作的之前,我们可以先看一个具体的实现。这可能会帮助我们理解。我们先定义一个behaviour:-module(my_...
分类:
其他好文 时间:
2014-07-03 19:17:59
阅读次数:
261
现在高版本的Nodejs安装已经自带了NPM模块,本次我需要安装的是:supervisor执行命令:npm install -g supervisor等待安装完成。查看版本可以cmd里面运行:node -v纯笔记。记性不好,记录点东西!
微软近期Open的职位:JOB TITLE: Senior Software Design EngineerDEPARTMENT: Microsoft Office Division ChinaIMMEDIATE SUPERVISOR: Development Lead/ManagerLocatio...
分类:
其他好文 时间:
2014-07-01 22:52:12
阅读次数:
341
微软近期Open的职位:JOB TITLE: Software Design Engineer IIDEPARTMENT: Microsoft Office Division ChinaIMMEDIATE SUPERVISOR: Development LeadLocation: Beijing, ...
分类:
其他好文 时间:
2014-07-01 10:29:30
阅读次数:
299
微软近期Open的职位:JOB TITLE: Senior Software Design EngineerDEPARTMENT: Microsoft Office Division ChinaIMMEDIATE SUPERVISOR: Development Lead/ManagerLocatio...
分类:
其他好文 时间:
2014-06-25 17:58:44
阅读次数:
293
Supervisor 是一个客户端/服务端模式的系统,使用户能够监视和控制 UNIX 操作系统的进程。Supervisor 为你提供一个地方来启动,停止和监视进程。进程可以单独或成组的形式控制。您可以配置 Supervisor 提供本地或远程命令行和 Web 界面。
分类:
其他好文 时间:
2014-06-24 17:59:08
阅读次数:
268
Express 4.x 默认将启动模块分离到了./bin/www中,直接使用 supervisor 无法正常监控应用,使得开发过程中的调试非常不方便。直接在 app.js 添加 app 模块即可。var debug = require('debug')('my-application'); // d...
分类:
其他好文 时间:
2014-06-18 10:23:33
阅读次数:
243
MRv1
Storm
JobTracker
Nimbus
TaskTracker
Supervisor
Child
Worker
Job
Topology
Map/Reduce
Spout/Blot
shuffle
Stream grouping...
分类:
其他好文 时间:
2014-06-16 21:24:47
阅读次数:
228