码迷,mamicode.com
首页 > 其他好文 > 详细

storm文档(4)----开发环境环境搭建

时间:2014-11-26 18:58:24      阅读:135      评论:0      收藏:0      [点我收藏+]

标签:storm

转载请注明出处:http://blog.csdn.net/beitiandijun/article/details/41519053

源地址:http://storm.apache.org/documentation/Setting-up-development-environment.html

 

本文大体介绍了如何搭建Storm开发环境。总的来说,步骤如下:

 

1、下载storm release版本。解压缩,然后将解压缩版本的/bin目录放在你的环境变量PATH中。

 

2、远程集群上topologies的启动与关闭,依赖于~/.storm/storm.yaml中的集群信息。

 

 

更多细节描述请看下面。

 

开发环境是怎样的?

 

Storm拥有两种操作模式: 本地模式以及远程模式。 本地模式中, 你完全可以在本地机器上的进程内开发和测试topologies。 远程模式中, 需要向集群提交topologies。

 

storm开发环境的必备依赖必须安装,这样你才能在本地模式下开发测试Storm topologies,打包topologies并部署在远程Storm集群上。

 

先浏览一下你的机器与远程集群之间的关系。集群是由名为“Nimbus”的节点所控制。你的机器可以和Nimbus节点通信,并将代码(通常是jar包)和topologies提交给集群以便执行, Nimbus负责在集群内分发代码,并分配workers去运行topology。你的机器使用名为storm的命令行客户端与Nimbus进行通信。storm客户端只能用于远程模式,而在本地模式的开发与测试中不能使用。

 

本地安装Storm release版本

 

如果你想从你的机器向远程集群提交topologies,你需要在本地安装Storm release版本。安装Storm release版本可以使你利用storm客户端与远程集群通信。要在本地安装Storm,需要从这里下载release版本,并在你的机器上解压它。 然后将解压版本的bin/目录加到环境变量PATH中去,这可以保证bin/storm脚本是可执行的。

 

在本地安装storm release版本只是为了可以与远程集群通信。若是在本地模式下开发测试topologies,建议你使用Maven,将storm作为你项目的一个dev依赖。更多关于Maven的信息可以阅读Maven

 

 

开始以及关闭远程集群中的topologies

 

前面在你的机器上安装storm客户端的步骤是用来和远程集群通信。现在你需要做的就是通知客户端---你想与哪个storm集群交互。要做这些的话, 你需要将控制节点的主机地址放在~/.storm/storm.yaml文件中,就像下面一样:

 nimbus host: "123.45.678.890"

 

如果你在AWS上部署storm集群,你可以使用storm-deploy项目,它可以自动的配置你的~/.storm/storm.yaml文件。 可以手工使用“attach”命令行连接storm集群,就像这样:

lei run :deploy  --attach --name mystormcluster

 

更多有关信息可以查看storm-deploywiki

 

storm文档(4)----开发环境环境搭建

标签:storm

原文地址:http://blog.csdn.net/beitiandijun/article/details/41519053

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!