http://www.infoq.com/cn/news/2014/09/admaster-hadoop卢亿雷是现任AdMaster技术副总裁，曾在联想研究院、百度基础架构部、Carbonite China工作，关注高可靠、高可用、高扩展、高性能系统服务，以及Hadoop/HBase/Storm/S...
分类：
编程语言 时间：
2014-09-25 20:31:17
阅读次数：
325
参考《CentOS6.4下Storm0.9.2单机版安装》的步骤在ubuntu上安装storm，中间遇到一些问题记录一下。参考文章链接：http://blog.csdn.net/qiyating0808/article/details/36041299我的linux环境：ubuntu-10.04.4-desktop-i386一，安装zeromq、jzmq及zookeeper时比较顺利，略过。ze..
分类：
其他好文 时间：
2014-09-25 13:37:19
阅读次数：
274
supervisor是storm集群重要组成部分，supervisor主要负责管理各个"工作节点"。supervisor与zookeeper进行通信，通过zookeeper的"watch机制"可以感知到是否有新的任务需要认领或哪些任务被重新分配。我们可以通用执行bin/storm superviso...
分类：
其他好文 时间：
2014-09-24 23:03:27
阅读次数：
383
Next,packagethesourceintoajar,whichissentwhenyouruntheStormClientcommandtosubmitthetopology.BecauseyouusedMaven,theonlythingyouneedtodoisgotothesourcefolderandrunthefollowing:mvnpackageOnceyouhavethegeneratedjar,usethestormjarcommandtosubmitthetopology(yous..
分类：
其他好文 时间：
2014-09-24 18:31:28
阅读次数：
191
今天有个storm的topology被人kill掉了，但是找不到是谁做的，storm的ui有killtopology的功能，但是没有权限验证，这样就导致知道ui地址的任何人都可以kill掉topology，比较危险，考虑把这个actiondisable掉。有两种方法：1.前端增加nginx，做location分析ui页面，对应kill的but..
分类：
其他好文 时间：
2014-09-24 04:41:26
阅读次数：
212
package storm.starter;import backtype.storm.Config;import backtype.storm.LocalCluster;import backtype.storm.LocalDRPC;import backtype.storm.StormSubmi...
分类：
其他好文 时间：
2014-09-23 21:33:45
阅读次数：
245
最近在使用storm做了一下数据处理性能测试。 ? ? Topology结构：spout输出80万数据（csv格式）；bolt1解析csv，拆分各信息段；bolt2按bolt1中某个字段汇总，累加记数后入库（入库触发频率：60s）。 ? ?...
分类：
其他好文 时间：
2014-09-23 17:43:35
阅读次数：
179
Storm是一个分布式的、可靠的、容错的数据流处理系统（流式计算框架，可以和mapreduce的离线计算框架对比理解）。 整个任务被委派给不同的组件，每个组件负责一个简单的特定的处理任务。Storm集群的输入流是一个叫...
分类：
其他好文 时间：
2014-09-23 13:10:17
阅读次数：
348
计算topNwords的topology,用于比如trendingtopicsortrendingimagesonTwitter.实现了滑动窗口计数和TopN排序,比较有意思,具体分析一下代码Topology这是一个稍微复杂些的topology,主要体现在使用不同的grouping方式,fields...
分类：
其他好文 时间：
2014-09-19 21:05:06
阅读次数：
274
“浏览器内核”主要指渲染引擎(Rendering Engine)，负责解析网页语法(如HTML、JavaScript)并渲染、展示网页。因此，所谓的浏览器内核通常也就是指浏览器所采用的渲染引擎，渲染引擎决定了浏览器如何显示网页的内容以及页面的格式信息。不同的浏览器内核对网页编写语法的解析也有所不同，...
分类：
Web程序 时间：
2014-09-17 13:19:32
阅读次数：
291
