前面介绍过hadoop的简单安装和FA安装，在这里将介绍几种hadoop2中HA（高可用性）安装，HA技术使hadoop不再存在单点namenode的故障。先来第一种：nfs+zookeeperHadoop
版本:2.2.0OS 版本: Centos6.4Jdk 版本: jdk1.6.0_32环境配...
分类：
其他好文 时间：
2014-05-17 03:07:21
阅读次数：
388
环境说明
1、硬件说明
使用三台PC机，角色分配如下
2、软件说明
约定所有软件都放在/usr/local/路径下
准备工作
1、安装jdk
2、配置SSH
Storm集群安装
安装流程图
1、安装Zookeeper集群
2、安装Storm依赖
zeromq、jzmq、pytho...
分类：
其他好文 时间：
2014-05-13 05:44:31
阅读次数：
345
学习大数据的处理，有必要读一下有关大数据的书籍。这里，我列举了几本书，仅供参考。
1 ZooKeeper: Distributed Process Coordination
这本书针对的是初级或者高级的开发，面向Zookeeper编程的工程师们。如果你的工程中（如HBase）涉及到Zookeeper的应用，有必要了解一下Zookeeper的管理知识和一些基本解...
分类：
其他好文 时间：
2014-05-12 22:46:32
阅读次数：
662
一、对于服务器端的搭建可以参考上一篇文章：kafka单机版环境搭建与测试
服务器端IP ：10.0.30.221
运行环境的目录如下：
需要改动config文件夹下的server.properties中的以下两个属性
zookeeper.connect=localhost:2181改成zookeeper.connect=10.0.30.221:2181
以及默认注释掉的
#host...
对这个课程感兴趣的朋友可以加我QQ2059055336和我联系。ZooKeeper是Hadoop的开源子项目（GoogleChubby的开源实现），它是一个针对大型分布式系统的可靠协调系统，提供的功能包括：配置维护、命名服务、分布式同步、组服务等。Zookeeper的FastFail和Leader选举特性大大增强了分..
分类：
其他好文 时间：
2014-05-09 00:54:51
阅读次数：
265
前面简单了解了ZooKeeper的相关知识，为SolrCloud的学习作了一层铺垫。在SolrCloud的wiki中，可以很简单地用jetty实现嵌入式ZooKeeper的单机版SolrCloud。但是在生产环境中，Solr一般都是部署在Tomcat上的。为了使架构更加灵活，ZooKeeper也是单独部署的。日常学习中，就一台单..
ZooKeeper做独立服务器运行(上)作者：chszs，转载需注明。博客主页：http://blog.csdn.net/chszs一、ZooKeeper安装及配置版本：ZooKeeper v3.4.6稳定版要设置ZooKeeper以单独服务器的模式运行是非常直接的。服务器包含在单个的JAR文件内，因此安装就只需创建一个配置文件。一旦下载了ZooKeeper稳定版，那么解压它，并进入ZooKeep...
分类：
其他好文 时间：
2014-05-05 21:30:05
阅读次数：
255
ZooKeeper做独立服务器运行(下)作者：chszs，转载需注明。博客主页：http://blog.csdn.net/chszs四、ZooKeeper Java客户端连接后的命令概述键入help，可以看到有如下命令： connecthost:port
getpath [watch]
lspath [watch]
setpat...
分类：
其他好文 时间：
2014-05-03 21:45:58
阅读次数：
274
Hadoop2.3.0+Hbase0.96.1.1+Hive0.14.0+Zookeeper3.4.6+Sqoop1.99.3安装配置流程
一、 配置Hadoop
源码包：hadoop-2.3.0-src.tar.gz
1. 安装以下软件：
yum -yinstall lzo-devel zlib-devel gcc autoconf automake li...
分类：
其他好文 时间：
2014-04-29 13:37:20
阅读次数：
541
1、监控目标
当系统可能或处于亚健康状态时及时提醒，预防故障发生报警提示
2、监控内容
2.1 机器监控
Kafka服务器指标
CPU LoadDisk IOMemory
2.2 JVM监控
主要监控JAVA的 GC time(垃圾回收时间)，JAVA的垃圾回收机制对性能的影响比较明显
2.3 Kafka系统监控
1、Kafka总体监控
zookeeper上/kaf...
分类：
其他好文 时间：
2014-04-27 18:10:15
阅读次数：
582
