先决条件： 1)java环境，须要安装java1.6以上版本号 2)hadoop环境，Hadoop-1.2.1的安装方法參考 hadoop-1.2.1安装方法具体解释 本文採用的hadoop是hadoop-1.2.1。hive採用的是hive-0.11.0 hive有三种安装模式： 内嵌模式：元数据 ...
分类：
其他好文 时间：
2017-05-20 15:30:11
阅读次数：
141
hadoop完全分布式的搭建思路？jdk必须安装，所有机器都是一样的。环境变量是PATH,但是在配置PATH的时候，一定要加上.;这是系统原来的环境变量，如果不加这个，可能再次开不出机器。Hadoop安装，可以放在yarn，也可以不放在yarn，环境变量HADOOP_HOME,JAVA_HOME(这个主要是切换j..
分类：
其他好文 时间：
2017-05-18 20:03:38
阅读次数：
132
讲准备好的文本文件放到hdfs中 执行 hadoop 安装包中的例子 查看执行结果： ...
分类：
其他好文 时间：
2017-05-14 12:30:43
阅读次数：
260
參考资源下载：http://pan.baidu.com/s/1ntwUij3视频安装教程：hadoop安装.flvVirtualBox虚拟机：hadoop.part1-part5.rarhadoop文件：hadoop-2.2.0.tar.gzhadoop配置文件：hadoop_conf.tar.gz ...
分类：
其他好文 时间：
2017-05-13 22:13:24
阅读次数：
193
windows安装hadoop没必要倒腾Cygwin，直接解压官网下载hadoop安装包到本地->最小化配置4个基本文件->执行1条启动命令->完事。下面把这几步细化贴出来，以hadoop2.7.2为例。 1、下载hadoop安装包就不细说了：http://hadoop.apache.org/->左 ...
分类：
Windows程序 时间：
2017-05-13 09:52:12
阅读次数：
1964
机器如下配置192.168.121.101master.hadoop192.168.121.201slave1.hadoop192.168.121.202slave2.hadoop安装ssh和rsync服务，机器已经安装就可以省略配置master无密码登录所有slave以下操作在master机器上完成以下操作在slave机器上完成4.配置所有slave无密码登录master以下是在..
分类：
其他好文 时间：
2017-05-10 11:18:06
阅读次数：
236
1、安装Hadoop开发插件hadoop安装包contrib/目录下有个插件hadoop-0.20.2-eclipse-plugin.jar，拷贝到myeclipse根目录下/dropins目录下。2、 启动myeclipse，打开Perspective：【Window】->【Open Perspe ...
分类：
其他好文 时间：
2017-05-06 14:16:49
阅读次数：
251
曾经的学习笔记 1.Hadoop简介： a) 分布式存储系统HDFS b) 分布式计算框架MapReduce 2.HDFS优点： a) 高容错性 b) 适合批处理 c) 适合大数据处理 d) 可构建在廉价机器上 3.HDFS的缺点： a) 低延迟数据访问 b) 小文件存取 c) 并发写入、文件随机修 ...
分类：
其他好文 时间：
2017-05-04 18:34:27
阅读次数：
188
1、Shell$ExitCodeException 现象：执行hadoop job时出现例如以下异常： 14/07/09 14:42:50 INFO mapreduce.Job: Task Id : attempt_1404886826875_0007_m_000000_1, Status : FA ...
分类：
其他好文 时间：
2017-04-29 21:01:29
阅读次数：
232
Hadoop安装 现在最新版为2.7.2，使用下面的链接下载： https://archive.apache.org/dist/hadoop/common/hadoop-2.7.2/hadoop-2.7.2.tar.gz 下载后使用下面的命令解压： tar zxf hadoop-2.7.2.tar. ...
分类：
其他好文 时间：
2017-04-28 21:23:29
阅读次数：
150
