今天总算是把hadoop2.4的整个开发环境弄好了,包括 windows7上eclipse连接hadoop,eclipse的配置和測试弄得烦躁的一逗比了~先上一张成功的图片,hadoop的伪分布式安装配置,仅仅要依照步骤来,有点基础的 基本没什么问题的。。eclipse的配置 弄了非常长一段时间才弄...
分类:
其他好文 时间:
2015-03-29 19:17:35
阅读次数:
103
本文其实还算不上真正的启动代码解析,本文主要还是从启动流程上分析到startHMaster部分,初次之外本文将就HBase的伪分布式调试方式进行相关的介绍.
我们将源码倒入到Intellij IDE之后会得到如下的代码结构:
这里我们进入hbase-server中在src/main下面的resources中添加hadoop-metrics2-hbase.properties,hbase...
分类:
其他好文 时间:
2015-03-21 11:15:01
阅读次数:
237
1.首先安装好jdk并且配置好java的环境变量(具体方法可以在google中搜到)解压hadoop-0.20.2.tar.gz到你的ubuntu账户的目录中(/home/xxxx/hadoop)(解压到任何目录都可以吧,看个人需要,不过配置下面文件的时候一定要改成自己的路径)修改hadoop下的c...
分类:
系统相关 时间:
2015-03-21 09:42:53
阅读次数:
193
系统: Ubuntu 14.04 64bitHadoop版本: Hadoop 2.5.2 (stable)JDK版本: JDK 1.6
虚拟机及Ubuntu安装
1. 下载并安装 VMware workstation 11
下载地址:https://my.vmware.com/web/vmware/info/slug/desktop_end_user_computing/vmwar...
分类:
系统相关 时间:
2015-03-20 16:30:36
阅读次数:
429
整个安装过程分为四部分:
一. 安装Homebrew
二. ssh localhost
三. 安装Hadoop已经进行配置文件设置 (伪分布式)
四. 运行栗子...
分类:
系统相关 时间:
2015-03-16 23:14:54
阅读次数:
467
1、下载scala2.11.5版本,下载地址为:http://www.scala-lang.org/download/2.11.5.html2、安装和配置scala:第一步:上传scala安装包 并解压第二步 配置SCALA_HOME环境变量到bash_profile第三步 source 使配置环境...
分类:
其他好文 时间:
2015-03-14 15:07:35
阅读次数:
162
在Ubuntu下创建hadoop用户组和用户hadoop的管理员最好就是以后要登录桌面环境运行eclipse的用户,否则后面会有拒绝读写的问题出现。当然不是也有办法办法解决。1. 创建hadoop用户组;[html] view plaincopysudoaddgrouphadoop2. 创建hado...
分类:
系统相关 时间:
2015-03-14 13:47:26
阅读次数:
280
本篇先介绍HBase在伪分布式环境下的安装方式,然后将MapReduce编程和HBase结合起来使用,完成WordCount这个例子。HBase在伪分布环境下安装一、 前提条件 已经成功地安装了jdk1.6和hadoop1.2.1。 Jdk1.6+Hadoop1.2.1在伪分布环境下具体的安装方.....
分类:
系统相关 时间:
2015-03-10 16:48:11
阅读次数:
310
获取ZooKeeper安装包 ????下载地址:http://apache.dataguru.cn/zookeeper ????选择一个稳定版本进行下载,我这里下载的是zookeeper-3.4.6版本。 ZooKeeper伪分布式集群安装 ????伪分布式集群:在一台...
分类:
其他好文 时间:
2015-03-08 21:42:40
阅读次数:
251
在这篇blog中,我们将介绍Hbase的单机模式安装与伪分布式的安装方式,以及通过浏览器查看Hbase的用户界面。搭建hbase伪分布式环境的前提是我们已经搭建好了hadoop完全分布式环境,搭建hadoop环境请参考:【Hadoop基础教程】4、Hadoop之完全分布式环境搭建
开发环境
硬件环境:Centos 6.5 服务器4台(一台为Master节点,三台为Slave节点)...
分类:
其他好文 时间:
2015-03-05 19:28:56
阅读次数:
213