1、安装环境是vmware workstation10.0模拟出三个虚拟节点,每一个节点安装Ubuntu12.04 LTS操作系统,主机名分别是hadoop1、hadoop2以及hadoop3.同时在每一个节点安装好java。安装方法同之前介绍的伪分布式安装方法一样。2、接着是对三个节点的hosts...
分类:
其他好文 时间:
2015-02-04 23:22:19
阅读次数:
277
实现真正的分布式的hadoop,并不是伪分布式的。一、系统与配置共准备2台机器搭建Hadoop集群。基于Ubuntu14.04,jdk1.6.0_45,Hadoop1.0.3版本,虚拟机使用VMware10.0192.168.1.10 NameNode master (master)192.168....
分类:
系统相关 时间:
2015-02-04 16:29:23
阅读次数:
208
首先安装双系统进行伪分布式实验,安装win7+ubuntu双系统:1、右键单击“我的电脑”进入“管理”,双击“存储”,再双击“磁盘管理”,在D盘位置右击“压缩卷”,分出一个大小为50G的磁盘空间,然后格式化,之后再删除卷,作为安装ubuntu系统所用。2、下载安装easyBCD软件,新建一个Neo ...
前言: 前段时间自己学习如何部署伪分布式模式的hadoop环境,之前由于工作比较忙,学习的进度停滞了一段时间,所以今天抽出时间把最近学习的成果和大家分享一下。 本文要介绍的是如何利用VMware搭建自己的hadoop的集群。如果大家想了解伪分布式的大家以及eclipse中的hadoop编程,...
分类:
系统相关 时间:
2015-02-01 13:24:15
阅读次数:
280
实现真正的分布式的hadoop,并不是伪分布式的。
一、系统与配置
共准备2台机器搭建Hadoop集群。基于Ubuntu14.04,jdk1.6.0_45,Hadoop1.0.3版本,虚拟机使用VMware10.0
192.168.1.10 NameNode master (master)
192.168.1.20 DateNode slave1(Slave)...
分类:
系统相关 时间:
2015-01-28 09:55:38
阅读次数:
290
Hadoop-2.6.0伪分布--安装配置hbase
1、用到的hadoop与hbase:
2、安装hadoop:
具体安装看这篇博文:
http://blog.csdn.net/baolibin528/article/details/42939477
hbase所有版本下载
http://archive.apache.org/dist/hbase/
3、...
分类:
其他好文 时间:
2015-01-27 09:26:53
阅读次数:
159
首先安装JDK,从Oracle官网下载在 /usr/目录下mkdir java创建一个java目录将jdk-7u72-linux-x64.rpm 放入java目录下执行rpm –ivh jdk-7u72-linux-x64.rpm再从Apache官网下载在 /usr/目录下 mkdir hadoop...
分类:
其他好文 时间:
2015-01-24 20:06:23
阅读次数:
208
1.准备Linux环境 1.0点击VMware快捷方式,右键打开文件所在位置 -> 双击vmnetcfg.exe -> VMnet1 host-only ->修改subnet ip 设置网段:192.168.68.0 子网掩码:255.255.255.0 -> apply -> ok 回到windo...
分类:
其他好文 时间:
2015-01-23 17:56:41
阅读次数:
143
hadoop-2.6.0运行WordCount
1、启动Hadoop:
2、创建file
文件夹:
这个是建在本地硬盘上的:
进入该目录:
创建两个 txt 文件:
结果如下:
3、在HDFS上创建输入文件夹目录 input :
把本地硬盘上创建的文件传进input 里面:
查看结果:
4、Hadoop自带的运...
分类:
其他好文 时间:
2015-01-22 18:12:14
阅读次数:
195
Hadoop1.2.1安装——单节点方式和单机伪分布方式一、 需求部分在Linux上安装Hadoop之前,需要先安装两个程序:1)JDK 1.6(或更高版本)。Hadoop是用Java编写的程序,Hadoop的编译及MapReduce的运行都需要使用JDK。因此在安装Hadoop前,必须安装JDK ...
分类:
其他好文 时间:
2015-01-21 21:48:27
阅读次数:
238