自己在虚拟机上建立伪分布环境，第一天还一切正常，后来发现每次重新开机以后都不能正常启动，在start-dfs.sh之后jps一下发现namenode不能正常启动，按提示找到logs目录下namenode的启动log发现如下异常。hadoop@cgy-VirtualBox:~$ jps5096 Re....
分类：
其他好文 时间：
2014-12-31 01:00:52
阅读次数：
382
内容包括hadoop单机版、伪分布式、分布式搭建方式以及在Eclipse上面安装hadoop插件配置hadoop，本菜亲测成功，希望对大家能产生帮助：
http://www.cnblogs.com/kinglau/category/509016.html
http://www.cnblogs.com/huligong1234/p/3533382.html
http://aub.ite...
分类：
其他好文 时间：
2014-12-26 23:06:19
阅读次数：
324
二、Hadoop伪分布式模式配置
本实验需要按照上一节单机模式部署后继续进行操作
1. 配置core-site.xml, hdfs-site.xml，mapred-site.xml及yarn-site.xml
1).修改core-site.xml:
$ sudo gvim /usr/local/hadoop/etc/core-site.xml
configurat...
分类：
其他好文 时间：
2014-12-23 21:11:31
阅读次数：
173
首先JDK安装及相关环境变量配置# Java environment settingJAVA_HOME=/usr/java/defaultCLASSPATH=.:$JAVA_HOME/lib/tools.jar:$JAVA_HOME/lib/dt.jarPATH=$JAVA_HOME/bin:$PA...
分类：
其他好文 时间：
2014-12-23 15:22:35
阅读次数：
228
Hadoop伪分布式配置过程：Hadoop：1.2.1Hbase：0.94.25nutch：2.2.1Java：1.8.0SSH：1.0.1jtomcat：7.0.57zookeeper：3.4.6（1）配置Java环境：http://www.cnblogs.com/xxx0624/p/416474...
分类：
系统相关 时间：
2014-12-21 13:49:57
阅读次数：
359
From: http://blog.csdn.net/yinan9/article/details/16805275 环境：CentOS 5.10（虚拟机下） [root@localhost hadoop]# lsb_release -a LSB Version: :core-4.0-ia32:co...
分类：
其他好文 时间：
2014-12-20 19:32:36
阅读次数：
296
接上一篇《Ubuntu Kylin系统下安装Hadoop2.6.0》通过上一篇，Hadoop伪分布式基本配好了。下一步是运行一个MapReduce程序，以WordCount为例：1. 构建实现类：cd /usr/local/hadoopmkdir workspacecd workspacegedit...
分类：
系统相关 时间：
2014-12-19 21:58:12
阅读次数：
275
Hadoop的框架最核心的设计就是：HDFS和MapReduce。HDFS为海量的数据提供了存储，HDFS有高容错性的特点，并且设计用来部署在低廉的（low-cost）硬件上；而且它提供高吞吐量（high throughput）来访问应用程序的数据，适合那些有着超大数据集（large data set）的应用程序。HDFS放宽了（relax）POSIX的要求，可以以流的形式访问（streaming access）文件系统中的数据，则MapReduce为海量的数据提供了计算。Hadoop 容易开发和运行处理大...
分类：
其他好文 时间：
2014-12-19 10:07:54
阅读次数：
307
本文发表于本人博客。这次来看看我们的客户端用url方式来连接JobTracker。我们已经搭建了伪分布环境，就知道了地址。现在我们查看HDFS上的文件，比如地址：hdfs://hadoop-master:9000/data/test.txt。看下面代码： static final String...
分类：
编程语言 时间：
2014-12-17 09:48:36
阅读次数：
175
配置zookeeper注意：因为是单机伪分布式配置，故同一机器上有3个serverzookeeper文件格式如下home---zookeeper---server0---zookeeper | ------------ser...
分类：
系统相关 时间：
2014-12-17 01:31:47
阅读次数：
253
