【如果觉得我的笔记写的好，您可以小额赞助我：支付宝 15202166392】本文环境：OS:CentOS 6.6JDK:1.7.0_79Hadoop:2.7.0User:xavier一、伪分布式Hadoop配置[备注]Hadoop位于：/home/xavier/下Hadoop目录下建立：tmp,df...
分类：
其他好文 时间：
2015-06-16 22:27:32
阅读次数：
182
一、storm伪分布式安装
（一）环境准备
1、OS：debian 7
2、JDK 7.0
（二）安装zookeeper
1、下载zookeeper并解压
wget http://mirror.bit.edu.cn/apache/zookeeper/zookeeper-3.4.6/zookeeper-3.4.6.tar.gz
tar -zxvf zookeeper-3.4...
分类：
其他好文 时间：
2015-06-16 19:23:42
阅读次数：
196
安装环境vmvare11centos6.5安装开始：一安装jdk将下载的.bin格式的JDK传输到Linux家目录下的Hadoop文件夹，将hadoop安装包也放到这个文件夹进入JDK安装目录建立一个软连接[root@CentOS-6java]#ln-sjdk1.6.0_27java[root@CentOS-6java]#cd进入家目录编辑.bashrc将hadoop目录解压..
分类：
其他好文 时间：
2015-06-16 08:05:42
阅读次数：
335
准备： 安装jdk和ssh。1. 官网下载hadoop1.2.1 hadoop-1.2.1.tar.gz http://hadoop.apache.org/releases.html2. 解压到/home/hadoop/目录下3. 伪分布式hadoop配置 可以把伪分布式的hadoop看做只...
分类：
其他好文 时间：
2015-06-15 18:19:55
阅读次数：
147
前提：1、搭建好hadoop伪分布式环境；2、安装好eclipse；注：修改 /etc/hosts 添加 “本机IP hadoop01” , 那么代码中创建hdfs文件系统的时候的URIhdfs://hadoop01:9000相当于 hdfs://hadoop服务器ip（例如：192.168.1.....
分类：
编程语言 时间：
2015-06-13 06:22:00
阅读次数：
121
一. 概要 经过几天的调试，终于在Linux Cent OS 5.5下成功搭建Hadoop测试环境。本次测试在一台服务器上进行伪分布式搭建。Hadoop 伪分布式模式是在单机上模拟 Hadoop 分布式，单机上的分布式并不是真正的伪分布式，而是使用线程模拟分布式。Hadoop 本身是无法区分伪分布....
分类：
其他好文 时间：
2015-06-11 06:57:39
阅读次数：
144
一、Hadoop组件依赖关系：步骤1）关闭防火墙和禁用SELinux切换到root用户关闭防火墙：service iptables stop禁用SELinuxvim /etc/sysconfig/selinux 设置SELinux=disabled2）设置静态IPvim /etc/sysconfig...
分类：
其他好文 时间：
2015-06-09 21:41:39
阅读次数：
111
单机版使用的是FileSystem类的静态函数:FileSystem hdfs = FileSystem.get(conf) 伪分布式下需要使用Path来获得Path path = new Path("hdfs://mlj:9000/dir"); FileSystem hdfs = path.ge....
分类：
其他好文 时间：
2015-06-07 14:34:23
阅读次数：
338
1、去官网下载zookeeper，我这里用的是3.4.6版本的2、下载完成解压缩到一个目录3、因为是伪分布式，所以我创建了3个服务器文件夹，比如server1,server2,server3。每个服务器文件夹下都创建了data,dataLog,logs目录。然后把解压完成的zookeeper拷贝到每...
分类：
其他好文 时间：
2015-05-29 22:56:32
阅读次数：
222
1.hadoop的伪分布安装1.1 设置ip地址 执行命令 service network restart 验证: ifconfig1.2 关闭防火墙 执行命令 service iptables stop 验证: service iptables status1.3 关闭防火墙的自动运行 执行命令....
分类：
其他好文 时间：
2015-05-29 15:21:51
阅读次数：
101
