Storm对比Hadoop，前者更擅长的是实时流式数据处理，后者更擅长的是基于HDFS，通过MapReduce方式的离线数据分析计算。对于Hadoop，本身不擅长实时的数据分析处理。两者的共同点都是分布式架构，而且都类似有主/从关系的概念。 本文不会具体阐述Storm集群和Zookeeper集群如何 ...
分类：
其他好文 时间：
2019-01-13 10:21:39
阅读次数：
236
部分一：Srorm 简介 1.1 Storm是实时的数据流，Hadoop是批量离线数据 起源背景 Twitter 开源的一个类似于Hadoop的实时数据处理框架 Storm是由Nathan Marz 在BackType公司【做社交数据分析，数据量大】工作中实现的，这家公司后来被Twitter收购。 ...
分类：
其他好文 时间：
2019-01-12 21:53:03
阅读次数：
225
Storm核心概念 Nimbus：Storm集群主节点，负责资源分配和任务调度。我们提交任务和截止任务都是在Nimbus上操作的。一个Storm集群只有一个Nimbus节点。 Supervisor：Storm集群工作节点，接受Nimbus分配任务，管理所有Worker。 Worker：工作进程，每个 ...
分类：
其他好文 时间：
2019-01-10 12:08:16
阅读次数：
209
1.chrome安装debug插件 详见参考文档2 参考文档： 1.怎么在谷歌浏览器中安装.crx扩展名的离线chrome插件 2.使用webstorm进行javascript的Debug调试功能 ...
分类：
Web程序 时间：
2019-01-09 13:36:41
阅读次数：
209
配置风暴抑制事例 针对于服务器莫名其妙的发包，可参考案例 对广播、组播或未知单播报文进行风暴控制的低阈值和高阈值 风暴控制的动作 风暴控制的检测时间间隔 操作步骤： 执行命令display storm-control interface gigabitethernet 0/0/1查看GE0/0/1接 ...
分类：
其他好文 时间：
2019-01-09 11:33:45
阅读次数：
843
今天线上环境发现storm任务日志里有如下异常： ， 堆栈信息里找到某dubbo服务A的某方法具体某行抛出的，查看服务A的日志，也有该异常信息。 在服务A的工程里找到那行代码，是某个计算分支里，的确调用了工程X的一个工具类方法。 有些奇怪，因为这个工具类方法调用已上线运行很久了，以前都没这个异常。 ...
分类：
编程语言 时间：
2019-01-08 22:26:11
阅读次数：
3230
PHPStorm是目前PHP开发者最常用的IDE之一，善用快捷键可以极大地提升效率，网上有很多盘点，多而全，但很多要么不实用，要么操作不方便，下面盘点一下个人平时最常用的，亲测有效。 CTRL+N 查找类 CTRL+SHIFT+N 全局搜索文件 CTRL+ALT+B 找到继承该接口或者父级 的所有子 ...
分类：
Web程序 时间：
2019-01-08 12:24:23
阅读次数：
140
一、SparkStreaming的介绍（1）为什么要有SparkStreaming？ Hadoop的MapReduce及SparkSQL等只能进行离线计算，无法满足实时性要求较高的业务需求，例如实时推荐、实时网站性能分析等，流式计算可以解决这些问题。目前有三种比较常用的流式计算框架，它们分别是Storm，SparkStreaming和fink。（2）SparkStreamin
分类：
其他好文 时间：
2019-01-06 22:04:55
阅读次数：
190
一、项目描述 基于开源物联网开发平台，构建实时数据采集系统，系统需实现物联设备管理，通信管理，协议管理，采用Redis，storm等实现实时数据的并发处理。该系统用于对变电站或其他高危场所进行一个实时的监控和管理，通过布放各种传感器来监测场所内的情况，一旦出现异常及时进行处理，防止意外的发生。基于物 ...
分类：
其他好文 时间：
2019-01-01 22:48:50
阅读次数：
263
```cache = & Cache::instance(); $this->queuecachename = 'queue_'.$queuename; $result = $this->cache->get($this->queuecachename); if(is_array($result))... ...
分类：
Web程序 时间：
2018-12-30 22:16:57
阅读次数：
209
