码迷,mamicode.com
首页 >  
搜索关键字:流计算    ( 186个结果
Storm流计算之项目篇(Storm+Kafka+HBase+Highcharts+JQuery,含3个完整实际项目)
...
分类:Web程序   时间:2016-04-12 00:16:56    阅读次数:164
storm中的基本概念
Storm是一个流计算框架,处理的数据是实时消息队列中的,所以需要我们写好一个topology逻辑放在那,接收进来的数据来处理,所以是通过移动数据平均分配到机器资源来获得高效率。 Storm的优点是全内存计算,因为内存寻址速度是硬盘的百万倍以上,所以Storm的速度相比较Hadoop非常快(瓶颈是内 ...
分类:其他好文   时间:2016-03-30 16:26:46    阅读次数:123
老李分享大数据生态圈 2
那如果我要更高速的处理呢? 如果我是一个类似微博的公司,我希望显示不是24小时热博,我想看一个不断变化的热播榜,更新延迟在一分钟之内,上面的手段都将无法胜任。于是又一种计算模型被开发出来,这就是Streaming(流)计算。 Storm是最流行的流计算平台。流计算的思路是...
分类:其他好文   时间:2016-01-26 18:37:10    阅读次数:146
论SparkStreaming的数据可靠性和一致性
转自:http://www.csdn.net/article/2015-06-21/2825011摘要:眼下大数据领域最热门的词汇之一便是流计算了,而其中最耀眼的无疑是来自Spark社区的SparkStreaming项目。 对于流计算而言,最核心的特点毫无疑问就是它对低时的需求,但这也带来了相关的数...
分类:其他好文   时间:2016-01-19 15:50:42    阅读次数:164
flume-kafka-storm日志处理经验
转自:http://www.aboutyun.com/thread-9216-1-1.html使用Storm处理事务型实时计算需求时的几处难点:http://blog.sina.com.cn/s/blog_6ff05a2c0101ficp.html最近搞日志处理,注意是日志处理,如果用流计算处理一些...
分类:Web程序   时间:2016-01-10 22:39:12    阅读次数:219
storm入门教程 第一章 前言
转自:http://blog.linezing.com/?p=1847storm:http://www.cnblogs.com/panfeng412/tag/Storm/http://blog.linezing.com/?cat=921.1 实时流计算互联网从诞生的第一时间起,对世界的最大的改变就是...
分类:其他好文   时间:2015-12-16 00:21:37    阅读次数:174
<译>Flink编程指南
Flink 的流数据 API 编程指南Flink 的流数据处理程序是常规的程序 ,通过再流数据上,实现了各种转换 (比如 过滤, 更新中间状态, 定义窗口, 聚合)。流数据可以来之多种数据源 (比如, 消息队列, socket 流, 文件). 通过sink组件落地流计算的最终结果,比如可以把数据落地...
分类:其他好文   时间:2015-12-07 20:16:29    阅读次数:2836
POJ - 2516 Minimum Cost(最小费用流)
1、K种物品,M个供应商,N个收购商。每种物品从一个供应商运送到一个收购商有一个单位运费。每个收购商都需要K种物品中的若干。求满足所有收购商需求的前提下的最小运费。2、K种物品拆开来,分别对每种物品进行最小费用最大流计算。建立超级源点和超级汇点:超级源点流向M个供应商,容量为供应商的存储量,费用为0...
分类:其他好文   时间:2015-11-25 21:12:33    阅读次数:341
大数据架构之:Storm
Storm是一个免费开源、分布式、高容错的实时计算系统,Twitter开发贡献给社区的。Storm令持续不断的流计算变得容易,弥补了Hadoop批处理所不能满足的实时要求。 Storm经常用于在实时分析、在线机器学习、持续计算、分布式远程调用和ETL等领域。特点1、Storm这是一个分布式的、容错....
分类:其他好文   时间:2015-11-09 20:41:35    阅读次数:225
Strom 简介,ppt
数据的生成可以看做一连串发生的离散事件, 这些事件流会伴随着不同的数据流、操作和分析,都会由一个通用的软件框架和基础设施来处理。 Storm 是 实时流计算框架之一。它提供了可容错分布式计算所要求的基本原句和保障机制,可以满足大容量关键业务应用需求。是一套技术的整合。来自为知笔记(Wiz)附件列.....
分类:其他好文   时间:2015-10-26 11:45:49    阅读次数:132
186条   上一页 1 ... 13 14 15 16 17 ... 19 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!