jstorm开发指南-写个简单的jstorm应用发表于 2015-07-18 | 分类于大数据 | 暂无评论jstorm 是阿里巴巴开源的基于storm采用Java重写的一套分布式实时流计算框架，使用简单，特点如下：开发非常迅速: 接口简单，容易上手，只要遵守Topology，Spout， Bol....
分类：
Web程序 时间：
2015-10-15 20:28:13
阅读次数：
369
Spark Streaming 是Spark核心API的一个扩展，可以实现高吞吐量的、具备容错机制的实时流数据的处理。支持从多种数据源获取数据，包括Kafk、Flume、Twitter、ZeroMQ、Kinesis 以及TCP sockets，从数据源获取数据之后，可以使用诸如map、reduce、join和window等高级函数进行复杂算法的处理。最后还可以将处理结果存储到文件系统，数据库和现场仪表盘。...
分类：
其他好文 时间：
2015-09-10 11:10:31
阅读次数：
169
【注】该系列文章以及使用到安装包/测试数据 可以在《倾情大奉送--Spark入门实战系列》获取1、实例演示1.1流数据模拟器1.1.1流数据说明在实例演示中模拟实际情况，需要源源不断地接入流数据，为了在演示过程中更接近真实环境将定义流数据模拟器。该模拟器主要功能：通过Socket方式监听指定的端口号...
分类：
其他好文 时间：
2015-09-07 08:16:56
阅读次数：
350
Spark大数据分析框架的核心部件 Spark大数据分析框架的核心部件包含RDD内存数据结构、Streaming流计算框架、GraphX图计算与网状数据挖掘、MLlib机器学习支持框架、Spark SQL数据检索语言、Tachyon文件系统、Spark...
分类：
其他好文 时间：
2015-08-07 13:35:39
阅读次数：
171
------Java培训、Android培训、iOS培训、.Net培训、期待与您交流！ -------计算机基础1 计算机概述 计算机（Computer）就是咱们说的电脑。官方解释是一种能够按照程序运行，自动、高速处理海量数据的现代化智能电子设备。由硬件和软件所组成，没有安装任何软件的计算机称为裸....
分类：
编程语言 时间：
2015-08-06 21:59:03
阅读次数：
131
官网:http://www.pipelinedb.com/pipelineDB是基于postgres的stream数据库。完全兼容pg的东西。由于产品需要解决性能这块瓶颈，老大让试试这款基于流计算的数据库。[pipeline@localhost ~]$ pipelinepipeline (9.4.4...
分类：
数据库 时间：
2015-08-04 12:43:52
阅读次数：
745
1.1 实时流计算互联网从诞生的第一时间起，对世界的最大的改变就是让信息能够实时交互，从而大大加速了各个环节的效率。正因为大家对信息实时响应、实时交互的需求，软件行业除了个人操作系统之外，数据库（更精确的说是关系型数据库）应该是软件行业发展最快、收益最为丰厚的产品了。记得十年前，很多银行别说实时转账...
分类：
其他好文 时间：
2015-08-04 00:18:24
阅读次数：
134
hadoop 是实现了 mapreduce 的思想，将数据切片计算来处理大量的离线数据。hadoop
处理的数据必须是已经存放在 hdfs 上或者类似 hbase 的数据库中，所以 hadoop 实现的时候
是通过移动计算到这些存放数据的机器上来提高效率而 storm 不同，storm 是一个流计算框
架，处理的数据是实时消息队列中的，所以需要我们写好一个 topology 逻辑放在那，...
分类：
其他好文 时间：
2015-07-02 19:34:35
阅读次数：
138
光流是图像亮度的运动信息描述。光流法计算最初是由Horn和Schunck于1981年提出的，创造性地将二维速度场与灰度相联系，引入光流约束方程，得到光流计算的基本算法．光流计算基于物体移动的光学特性提出了2个假设：
①运动物体的灰度在很短的间隔时间内保持不变；
②给定邻域内的速度向量场变化是缓慢的。
算法原理
假设图像上一个像素点(x,y)，在t时刻的亮度为E(x+Δx,y+Δy,t+...
分类：
其他好文 时间：
2015-06-25 19:42:38
阅读次数：
3535
Twitter Heron 论文笔记，简单介绍论文前半部分对storm局限性，从Storm worker、Nimbus以及资源分配这些来阐述目前Storm存在的问题。...
分类：
其他好文 时间：
2015-06-03 19:41:48
阅读次数：
147
