主要配置 core-site.xml hdfs-site.xml mapred-site.xml
分类：
其他好文 时间：
2016-02-20 22:54:07
阅读次数：
200
为了测试方便记录下hadoop伪分布式部署：包下载地址：http://archive.cloudera.com/cdh5/cdh/5/我选用的是cdh5.4.5版本etc/profile 配置文件export JAVA_HOME=/home/jdk1.7.0_79export JRE_HOME=/h...
分类：
其他好文 时间：
2016-01-26 18:07:39
阅读次数：
163
简介： Hadoop是处理大数据的主要工具，其核心部分是HDFS、MapReduce。为了学习的方便，我在虚拟机上搭建了一个伪分布式环境，来进行开发学习。一、安装前准备：1）linux服务器：Vmware 上CentOS6.4 mini安装2) JDK：jdk-7u65-linux-x64.gz3)...
分类：
其他好文 时间：
2016-01-22 21:20:40
阅读次数：
228
问题描述： 以单机伪分布式方式安装了hadoop2.7.1，并在该机器上安装了hive1.2.1。首先执行 sbin/start-dfs.sh 启动hdfs服务，然后执行hive，这时hive脚本启动报错，提示hdfs进入了安全模式，hive无法创建临时目录，出错信息如下：原因分析： 在hdf...
分类：
其他好文 时间：
2016-01-14 18:53:16
阅读次数：
129
我们在搭建伪分布式Hadoop环境，需要将一系列的配置文件配置好。 一、配置文件 1. 配置文件hadoop-env.sh export JAVA_HOME=/opt/modules/jdk1.7.0_67 2. 配置core-site.xml d...
分类：
其他好文 时间：
2015-12-24 02:08:10
阅读次数：
230
参见：http://www.powerxing.com/install-hadoop/完全拷贝至上面网址环境本教程使用 Ubuntu 14.04 64位 作为系统环境（Ubuntu 12.04 也行，32位、64位均可），请自行安装系统。如果用的是 RedHat/CentOS 系统，请查看相应的Ce...
分类：
系统相关 时间：
2015-12-21 07:07:07
阅读次数：
403
ubuntu14.04安装hadoop2.7.1伪分布式和错误解决需要说明的是我下载的是源码，通过编译源码并安装一、需要准备的软件：1.JDK和GCC 设置JAVA_HOME： vim ~/.bashrc 在最后增加：export JAVA_HOME=/usr/lib/jvm/jdk1.8.0_31...
分类：
系统相关 时间：
2015-11-30 12:56:35
阅读次数：
407
需要用到的软件：CentOS-6.5-x86_64-bin-DVD1.iso jdk-7u55-linux-i586.tar.gz hadoop-2.4.1 SecureCRTPortable1.准备Linux环境 1.0先将虚拟机的网络模式选为NAT ...
分类：
其他好文 时间：
2015-11-28 16:40:36
阅读次数：
142
其实我就是要让数据存储在hdfs上而已。。。。。。。。多配置点东西就好了，在hbase-site.xml中加入: hbase.rootdir hdfs://yangsy132:9000/user/hive/warehouse/ ...
分类：
其他好文 时间：
2015-11-26 23:06:51
阅读次数：
166
VirtualBox搭建伪分布式模式：hadoop的下载与配置 VirtualBox搭建伪分布式模式：hadoop的下载与配置由于个人机子略渣，无法部署XWindow环境，直接用的Shell来操作，想要用鼠标点击操...
分类：
系统相关 时间：
2015-11-10 22:31:50
阅读次数：
371
