目录1.hadoop分布式安装2.zookeeper分布式安装3.hbase分布式安装4.pig分布式安装5.hive客户端安装
分类：
其他好文 时间：
2014-10-31 08:45:43
阅读次数：
244
1， 安装准备 ? 1.1 下载http://mirror.bjtu.edu.cn/apache/zookeeper/zookeeper-3.3.3/zookeeper-3.3.3.tar.gz 1.2 安装jdk : 我的是jdk-1.6.0_14-fcs 1.3 系统： linux?:centos-5.4 1.4 hadoop安装配置： ??...
分类：
其他好文 时间：
2014-10-30 12:03:02
阅读次数：
255
ZooKeeper 是一个分布式的，开放源码的分布式应用程序协调服务，它包含一个简单的原语集，分布式应用程序可以基于它实现同步服务，配置维护和命名服务等。 Zookeeper是hadoop的一个子项目，其发展历程无需赘述。在分布式应用中，由于工程师不能很好地使用锁机制，以及基于消息的协调机制不适合在...
分类：
其他好文 时间：
2014-10-30 11:38:43
阅读次数：
256
问题导读：1.如何利用zookeeper保证集群Master可用性和唯一性？2.zookeeper竞选Master包含哪些过程？3.zookeeper竞选Master机制利用了zk哪些特性？在zookeeper应用场景中提出了对于Master节点管理的问题，如何保证集群中Master可用性和唯一性，...
分类：
其他好文 时间：
2014-10-29 21:19:49
阅读次数：
331
问题导读：1.zookeeper如何实现分布式锁？2.什么是羊群效应？3.zookeeper如何释放锁？在zookeeper应用场景有关于分布式集群配置文件同步问题的描述，设想一下如果有100台机器同时对同一台机器上某个文件进行修改，如何才能保证文本不会被写乱，这就是最简单的分布式锁，本文介绍利用z...
分类：
其他好文 时间：
2014-10-29 21:14:59
阅读次数：
135
问题导读:1.zookeeper观察者什么时候调用？2.传统远程轮询服务存在什么问题？3.zk中回调服务的机制是什么？4.zk中watcher为什么不永久注册？5.什么是znode？在阅读之前首先明确个概念：1.什么是znode？2.什么是客户端？我们使用znode这个术语来表示ZooKeeper的...
分类：
其他好文 时间：
2014-10-29 21:13:22
阅读次数：
190
问题导读：1.本文三个角色之间是什么关系？2.三个角色的作用是什么？3.如何代码实现这三个角色的作用？在zookeeper适用场景：zookeeper解决了哪些问题有关于分布式集群配置文件同步问题的描述，本文介绍如何把zk应用到配置文件分发的场景。假设有三个角色trigger：发布最新的配置文件数据...
分类：
其他好文 时间：
2014-10-29 21:05:53
阅读次数：
256
环境说明： l? hadoop：2.4.0 l? Zookeeper：3.4.6 l? Hbase：0.96 l? Hive：0.13.1 ? 1.? Hive整合HBase原理 Hive与HBase整合的实现是利用两者本身对外的API接口互相进行通信，相互通信主要是依靠Hive安装...
分类：
其他好文 时间：
2014-10-29 19:54:53
阅读次数：
407
一、问题起源淘宝搜索的博客http://www.searchtb.com/2011/01/zookeeper-research.html 提到Paxos是zookeeper的灵魂有一篇文章标题更是以“Zookeeper全解析——Paxos作为灵魂” 作为标题，认为是zookeeper的基础：“Goo...
分类：
编程语言 时间：
2014-10-29 14:28:49
阅读次数：
717
一、简介zookeeper是hadoop的一个子项目，A distribute coordination service for distributed applications 为了分布式应用而开发的分布式管理服务。多个server，少数server down不会影响整个分布式服务。zookeep...
分类：
其他好文 时间：
2014-10-29 14:19:01
阅读次数：
221
