下载hadoop1.0.4版本，和jdk1.6版本或更高版本：1. 安装JDK，安装目录大家可以自定义，下面是我的安装目录： 配置环境变量： 将环境变量添加到profile文件底部： 激活环境变量： 2. 安装hadoop创建hadoop用户及其hadoop组。配置IP对应域名在 在hosts文件底 ...
分类：
其他好文 时间：
2017-11-24 19:13:49
阅读次数：
150
========一.hadoop伪分布式=========
<code>
伪分布式环境配置
需要安装openjdk和openjdk-devel软件包（用的是1.8.0版本）
rpm-qlJava-openjdk-devel-1.8.0|grep‘/bin/javac’
vim/etc/profile
#Java
exportJAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.151-1.b12...
分类：
其他好文 时间：
2017-11-22 17:51:07
阅读次数：
145
环境 ubuntu hadoop2.8.1 java1.8 1.配置java1.8 2.配置ssh免密登录 3.hadoop配置 环境变量 配置hadoop环境文件hadoop-env.sh core-site.xml mapred-site.xml hdfs-site.xml yarn-site. ...
分类：
系统相关 时间：
2017-10-28 23:55:26
阅读次数：
273
1.安装SSH server、配置SSH无密码登陆Ubuntu默认安装了SSH client，还需要安装SSH server。sudo apt-get install openssh-server设置SSH无密码登陆本机ssh localhost会有如下提示(SSH首次登陆提示)，输入yes。SSH ...
分类：
系统相关 时间：
2017-10-03 17:24:33
阅读次数：
280
前面的文章已经讲过hadoop伪分布式安装，这里直接介绍hbase伪分布式安装。 1、 下载hbase 版本hbase 1.2.6 2、 解压hbase 3、 修改hbase-env.sh 新增如下内容 4、 修改hbase-site.xml hbase.rootdir使用hadoop文件系统 hb ...
分类：
其他好文 时间：
2017-09-14 00:30:51
阅读次数：
159
0.前言前面一篇《Hadoop初体验：快速搭建Hadoop伪分布式环境》搭建了一个Hadoop的环境，现在就使用Hadoop自带的wordcount程序来做单词统计的案例。1.使用示例程序实现单词统计（1）wordcount程序wordcount程序在hadoop的share目录下，如下：[root@leafmapreduce]#pwd
/usr/loca..
分类：
其他好文 时间：
2017-09-03 23:54:37
阅读次数：
229
0.前言本文旨在使用一个全新安装好的Linux系统从0开始进行Hadoop伪分布式环境的搭建，以达到快速搭建的目的，从而体验Hadoop的魅力所在，为后面的继续学习提供基础环境。对使用的系统环境作如下说明：操作系统：CentOS6.564位主机IP地址：10.0.0.131/24主机名：leaf用户名：roo..
分类：
其他好文 时间：
2017-08-30 10:02:34
阅读次数：
207
先上传hadoop的安装包到服务器上去/home/hpc/ 注意：hadoop2.x的配置文件$HADOOP_HOME/etc/hadoop 伪分布式需要修改5个配置文件 4.1配置hadoop--配置文件目录 /etc/hadoop/ 第一个文件：hadoop-env.sh vi hadoop-e ...
分类：
其他好文 时间：
2017-08-09 22:23:03
阅读次数：
231
一 . 安装JDK 查询目前系统的JDK： rpm -qa|grep jdk. 卸载JDK yum -y remove xx tar -xzvf jdk-7u80-linux-x64.tar.gz 配置环境变量： vim /etc/profile export JAVA_HOME=/opt/soft ...
分类：
其他好文 时间：
2017-07-06 14:17:09
阅读次数：
106
1：Vmware虚拟软件里面安装好Ubuntu操作系统之后使用ifconfig命令查看一下ip; 2：使用Xsheel软件远程链接自己的虚拟机，方便操作。输入自己ubuntu操作系统的账号密码之后就链接成功了； 3：修改主机的名称vi /etc/hostname和域名和主机映射对应的关系 vi /e ...
分类：
系统相关 时间：
2017-06-16 21:16:06
阅读次数：
251
