原文地址 简单易用,Storm让大数据分析变得轻而易举。 如今,公司在日常运作中经常会产生TB(terabytes)级的数据。数据来源包括从网络传感器捕获的,到Web,社交媒体,交易型业务数据,以及其他业务环境中创建的数据。考虑到数据的生成量,实时计算(real-time computation )...
分类:
其他好文 时间:
2015-11-02 18:58:16
阅读次数:
1409
转发自玖疯的博客 http://www.cnblogs.com/lxf20061900/p/3866252.html Spark Streaming是一个新的实时计算的利器,而且还在快速的发展。它将输入流切分成一个个的DStream转换为RDD,从而可以使用Spark来处理。它直接支持多种数据源.....
分类:
Web程序 时间:
2015-10-29 13:11:47
阅读次数:
328
WordCount是很多分布式计算中,最常用的例子,例如Hadoop、Storm,Iveely Computing也不例外。明白了WordCount在Iveely Computing上的运行原理,就很容易写出新的分布式程序。上一篇中已经知道了如何部署Iveely Computing以及提交任务,现在...
分类:
其他好文 时间:
2015-10-09 18:07:03
阅读次数:
232
Hi,博友: 欢迎查阅《细细品味架构》系列,本系列将和我一起学习,并慢慢走近架构师的神秘世界。 本期目录:1、本期内容... 31.1 版权申明... 31.2 内容详情... 31.2.1 实时计算在点评的使用场景... 31.2.2 实时计算在业界的使用场景... 41.2.3 点评如何构建.....
分类:
其他好文 时间:
2015-09-15 18:17:57
阅读次数:
194
2 Storm的基本组成部分 经过前一部分,我们可以搭建起Storm的执行环境,并可以通过浏览器打开对应的管理页面。如果已经成功的到达这一步,那么恭喜你,Storm的框架已经搭建成功,接下来就是Storm具体该如何应用了...
分类:
其他好文 时间:
2015-08-19 17:54:44
阅读次数:
196
Storm是什么:如果只用一句话来描述storm的话,可能会是这样:分布式实时计算系统。按照storm作者的说法,storm对于实时计算的意义类似于hadoop对于批处理的意义。我们都知道,根据googlemapreduce来实现的hadoop为我们提供了map,reduce原语,使我们的批处理程序变得非常地简单..
分类:
其他好文 时间:
2015-08-10 20:20:52
阅读次数:
202
实时计算系统实时计算场景:伴随着信息科技日新月异的发展,信息呈现出爆发式的膨胀,人们获取信息的途径也更加多样、更加便捷,同时对于信息的时效性要求也越来越高。举个搜索场景中的例子,当一个卖家发布了一条宝贝信息时,他希望的当然是这个宝贝马上就可以被卖家搜索出来..
分类:
其他好文 时间:
2015-08-10 16:20:26
阅读次数:
148
Java实现定时任务: 在应用里经常都有用到在后台跑定时任务的需求。举个例子,比如需要在服务后台跑一个定时任务来进行非实时计算,清除临时数据、文件等。在本文里,我会给大家介绍3种不同的实现方法:普通thread实现TimerTask实现ScheduledExecutorService实现普通thr....
分类:
其他好文 时间:
2015-07-30 13:09:20
阅读次数:
217
在中企业级的应用开发的过程中,我们经常有这种需求:程序能计算的表格数据,尽量让程序去做;这点本身不难,难的是如何尽量提高程序的人性化程度,需要自动计算,即所谓的所见即所得。其实这个实现起来也比较简单啦,最主要的就是获取当前选中的行的数据咯。具体代码如下:xaml部分: ...
分类:
Web程序 时间:
2015-07-19 19:29:36
阅读次数:
129