标签:storm 安装 配置 大数据 nimbus supervisor
1、下载Storm及相关组件,包括:
Storm包:https://storm.apache.org/downloads.html
ZeroMQ包:http://zeromq.org/area:download
JZMQ包:https://github.com/nathanmarz/jzmq
2、安装依赖包
1,安装ZeroMQ包和JZMQ包
一般步骤:
./configure
make
make install
默认configure的前缀--prefix=/usr/local
2,问题集锦
1)gcc未安装:
configure: error: no acceptable C compiler found in $PATH
解决方法:yum install gcc
2)gcc相关包冲突
glibc-common-2.12-1.80.el6.i686 (installed) Requires: glibc = 2.12-1.80.el6
解决方法:yum list glibc
yum remove glibc.i686
yum install gcc
3)c++编译器未安装
configure: error: Unable to find a working C++ compiler
解决方法:yum install gcc-c++
4)libsodium未安装
No package ‘libsodium‘ found
解决方法:下载并安装libsodium:
https://download.libsodium.org/libsodium/releases/
5)libsodium未找到
No package ‘libsodium‘ found
解决方法:设置环境变量:export PKG_CONFIG_PATH=/usr/local/lib/pkgconfig
3、配置Storm
在conf/storm.yaml中添加:
storm.zookeeper.servers: - "XHadoop1" - "XHadoop2" - "XHadoop3" storm.local.dir: "/root/home/storm_work" nimbus.host: "XHadoop1" supervisor.slots.ports: - 6700 - 6701 - 6702 - 6703
第一个参数:zookeeper所在的所有节点服务器
第二个参数:本地路径,必须手动创建
第三个参数:指定主节点
第四个参数:指定从节点工作端口
其中第一个参数和第四个参数是数组类型,需要分行写,其它两个是字符串型不能分行写,且冒号后面需要有空格,否则报错
4、运行程序
从节点:bin/storm supervisor >/dev/null 2>&1 &
主节点管理:bin/storm ui >/dev/null 2>&1 &
管理页面:主节点:8080
本文出自 “从零开始” 博客,请务必保留此出处http://loverofvenus.blog.51cto.com/2766338/1670583
标签:storm 安装 配置 大数据 nimbus supervisor
原文地址:http://loverofvenus.blog.51cto.com/2766338/1670583