码迷,mamicode.com
首页 > 其他好文 > 详细

Storm集群搭建

时间:2015-06-07 23:11:37      阅读:180      评论:0      收藏:0      [点我收藏+]

标签:

1、下载、解压缩

2、编辑conf/storm.yaml

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
storm.zookeeper.servers:
     - "vm1"
#     - "server2"
#
 
storm.zookeeper.port: 2181
 
storm.local.dir: "/usr/local/bigdata/tmp/storm_tmp"
 
nimbus.host: "vm1"
 
supervisor.slots.ports:
    - 6700
    - 6701
    - 6702
    - 6703

storm.zookeeper.servers:配置zk集群,不带端口

storm.zookeeper.port:配置zk集群的端口,默认是2181

storm.local.dir:配置storm的本地目录,用于存放jar、conf等文件。

nimbus.host:配置storm集群的nimbus(主节点)

supervisor.slots.ports:配置storm集群的supervisor(从节点)的端口,配置几个端口就有几个槽(slot),默认是6700、6701、6702、6703 4个端口

 

将storm文件夹复制到storm集群的其他机器上。

1
rsync -a storm vm2@storm:/usr/local/bigdata/

 

3、启动主节点nimbus

在主节点上执行命令:

1
storm nimbus

或者

1
storm nimbus >/dev/null &

4、启动从节点supervisor

在从节点上执行命令(其实也可以在主节点上启动):

1
storm supervisor >/dev/null &

5、启动storm ui

1
storm ui >/dev/null &

端口默认是8080,访问地址:http://vm1:8080/

在UI界面上可以查看集群、topology的状态,也可以执行一些命令

6、提交topology

1
storm jar xx.jar aa.bb.WordcountTopology

7、杀死topology

1
storm kill wordcount -w 30

8、启动logviewer

在storm集群所有节点上都要执行:

1
storm logviewer >/dev/null &

 

Storm集群搭建

标签:

原文地址:http://www.cnblogs.com/lishouguang/p/4559199.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!