标签:hbase hadoop 超人学院
1. 安装说明
l Zookeeper3.4.5集群已部署(192.168.210.95\192.168.210.86 部署手册见zookeeper安装手册)
l Hbase版本号 0.96.1
l 操作系统Red HatEnterprise Linux Server release 5.5 (Tikanga)
2. 安装步骤
1) 下载HBase0.96.1,hbase-0.96.1-hadoop2-bin.tar.gz,官网地址:hbase.apache.org
2) 上传至服务器210.95,目录:/home/sun
3) 解压:tar -xvf hbase-0.96.1-hadoop2-bin.tar.gz,解压后MV目录:/home/sun/hbase
4) 添加配置项:/etc/profile
export HBASE_HOME=/home/sun/hbase
export PATH=$PATH HBASE_HOME/bin
5) 修改/home/sun/hbase/conf/hbase-env.sh
exportJAVA_HOME=/usr/local/java/jdk1.7.0_45
export HBASE_MANAGES_ZK=false (此处设置为FALSE是为了使用自己配置的zookeeper集群)
6) 修改/home/sun/hbase/conf/regionservers,添加相应的regionserver
7) 修改/home/sun/hbase/conf/hbase-site.xml
<configuration>
<property>
<name>hbase.master</name>
<value>namenode:6000</value>
</property>
<property>
<name>hbase.rootdir</name>
<value>hdfs://namenode:9000/hbase</value>
</property>
<property>
<name>hbase.cluster.distributed</name>
<value>true</value>
</property>
<property>
<name>hbase.zookeeper.property.clientPort</name>
<value>2181</value>
</property>
<property>
<name>hbase.zookeeper.quorum</name>
<value>namenode,datanode002</value>
</property>
</configuration>
8) 将/home/sun/hbase/lib下的相关HADOOPJAR包替换为2.2版本
9) 先启动zookeeper,然后启动hbase:cd/home/sun/hbase/bin后,./start-hbase.sh
10) 查看启动日志,确定启动无错误,在95、86上jps查看。
PS:运行HBASE过程中出现错误,提示多个SELF4J版本JAR包存在,导致错误,将FLUME LIB包中的SELF4J两个JAR删除即可
3. 测试HBase
1) 进入HBase目录,启动HBase : cd /home/sun/hbase/bin
2) ./start-hbase.sh
3) 启动hbase shell : hbase shell
4) 查看状态 status
5) 创建表: create ‘warn’,’id’,’clientid’,’clientname’
6) 查看所有表: list
7) 统计表行数: count ‘warn’
4. 问题补充
Datanode001 上HRegionServer 挂掉,报异常:org.apache.zookeeper.KeeperException$SessionExpiredException:KeeperErrorCode = Session expired,在前台错误显示为:ERROR:
java.io.IOException: Table Namespace Manager not ready yet,try again later:
/home/sun/hbase/conf/hbase-env.sh中添加:
export HBASE_OPTS="$HBASE_OPTS -verbose:gc-XX:+HeapDumpOnOutOfMemoryError -XX:+UseConcMarkSweepGC-XX:+CMSParallelRemarkEnabled -XX:+UseParNewGC
-XX:CMSInitiatingOccupancyFraction=70"
/home/sun/hbase/conf/hbase-site.xml中添加:
<property>
<name>zookeeper.session.timeout</name>
<value>90000</value>
</property>
<property>
<name>hbase.regionserver.restart.on.zk.expire</name>
<value>true</value>
</property>
更多精彩内容请关注:http://bbs.superwu.cn
关注超人学院微信二维码:
HBase安装手册
标签:hbase hadoop 超人学院
原文地址:http://blog.csdn.net/crxy2014/article/details/46428171