Maven安装使用环境准备：JDK1.6Maven3.0.4mveclipse8.6.1（集成mveclipse）安装Maven之前要求先确定JDK已经安装配置完成，Maven是Apache下的一个项目。官网下载Mavenhttp://www.apache.org/dyn/closer.cgi/maven/binaries/apache-maven-3.0.4-bin.tar.gz下载完成后解压或重命名..
分类：
其他好文 时间：
2015-08-12 14:48:05
阅读次数：
173
Storm学习的HelloWorld1、下载Storm-start(https://github.com/nathanmarz/storm-starter/archive/master.zip)2、进入下载目录，对zip文件解压3、进入解压后的文件目录，修改m2-pom.xml（将twitter4j-core和twitter4j-stream替换为下面的部分） <dependency><groupId&..
分类：
其他好文 时间：
2015-08-11 23:44:31
阅读次数：
221
以下是依次需要完成的安装步骤一、安装JDK1.6二、安装Zookeeper三、安装zeromq-2.1.7四、安装jzmq五、安装Python-2.7.2六、安装unzip七、安装Storm一、下载并安装JDK1.6并设置环境变量，如：exportJAVA_HOME=/opt/java6exportPATH=$PATH:$JAVA_HOME/bin运行java、javac命令，测..
分类：
其他好文 时间：
2015-08-11 19:15:41
阅读次数：
134
Storm是什么：如果只用一句话来描述storm的话，可能会是这样：分布式实时计算系统。按照storm作者的说法，storm对于实时计算的意义类似于hadoop对于批处理的意义。我们都知道，根据googlemapreduce来实现的hadoop为我们提供了map,reduce原语，使我们的批处理程序变得非常地简单..
分类：
其他好文 时间：
2015-08-10 20:20:52
阅读次数：
202
首先我们通过一个storm和hadoop的对比来了解storm中的基本概念。HadoopStorm系统角色JobTrackerNimbusTaskTrackerSupervisorChildWorker应用名称JobTopology组件接口Mapper/ReducerSpout/Bolt接下来我们再来具体看一下这些概念。a、Nimbus：负责资源分配和任务调度。b、Supervi..
分类：
其他好文 时间：
2015-08-10 20:20:48
阅读次数：
119
Storm适用场景流聚合：流聚合就是把两个或多个数据流聚合成一个数据流--基于一些共同的tuple字段。builder.setBolt(5,newMyJoiner(),parallelism).fieldsGrouping(1,newFields("joinfield1","joinfield2")).fieldsGrouping(2,newFields("joinfield1","joinfield2")).fieldsGrou..
分类：
其他好文 时间：
2015-08-10 20:18:13
阅读次数：
107
实时计算系统实时计算场景：伴随着信息科技日新月异的发展，信息呈现出爆发式的膨胀，人们获取信息的途径也更加多样、更加便捷，同时对于信息的时效性要求也越来越高。举个搜索场景中的例子，当一个卖家发布了一条宝贝信息时，他希望的当然是这个宝贝马上就可以被卖家搜索出来..
分类：
其他好文 时间：
2015-08-10 16:20:26
阅读次数：
148
