Hadoop读书笔记(五)MapReduce统计单词demo...
分类:
其他好文 时间:
2014-11-24 22:35:16
阅读次数:
281
直接上问题:这两天为了试验,安装了两套集群:(1)32位hadoop1集群(5个节点);(2)64位hadoop2集群(6个节点)两个集群中都遇到过这样的问题:在namenode正常启动hadoop集群后,查看datanode是正常的显示存在进程,但是在web界面中查看的时候,发现数据节点全部属于宕机,或者就是干脆直接..
分类:
Web程序 时间:
2014-11-17 19:47:36
阅读次数:
248
直接上问题:这两天为了试验,安装了两套集群:
(1)32位hadoop1集群(5个节点);
(2)64位hadoop2集群(6个节点)
两个集群中都遇到过这样的问题:在namenode正常启动hadoop集群后,查看datanode是正常的显示存在进程,但是在web界面中查看的时候,发现数据节点全部属于宕机,或者就是干脆直接没有datanode.还有种情况,...
分类:
Web程序 时间:
2014-11-17 16:00:22
阅读次数:
199
hadoop启动时报如下错误:错误分别在namenode和jobTracker日志文件都有org.apache.hadoop.hdfs.server.namenode.SafeModeException:Cannotdelete/usr/hadoop/tmp/mapred/system.Namenodeisinsafemode.Theratioofreportedblocks1.0000hasreachedthethreshold0.9990.Safemodewill..
分类:
其他好文 时间:
2014-11-16 18:54:48
阅读次数:
242
环境:
Linux系统centOS6.3(64bit)
hadoop1.1.2
Linux下Eclipse版本
最大值算法代码:
package yunSave;
import java.io.IOException;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop....
分类:
编程语言 时间:
2014-11-10 12:11:39
阅读次数:
269
假设有三台机器,它们的IP地址和对应的主机名为:192.168.12.18 localhost.localdomain192.168.2.215 rhel5530g192.168.35.198 mddb011:在每一台机器的/etc/hosts文件中加入ip地址和主机名的映射,也就是把上面的三行加入...
分类:
其他好文 时间:
2014-11-06 17:19:52
阅读次数:
276
Cannot connect to the Map/Reduce location: hadoop1.0.3
Call to ubuntu/192.168.1.111:9000 failed on connection exception: java.net.ConnectException:...
分类:
系统相关 时间:
2014-11-06 13:03:09
阅读次数:
178
1:软件环境准备1.1Hadoop:我们使用hadoop Release 1.2.1(stable)版本,下载链接:http://mirrors.ustc.edu.cn/apache/hadoop/common/hadoop-1.2.1/我们选择hadoop-1.2.1-bin.tar.gz文件下载...
分类:
其他好文 时间:
2014-11-04 19:14:38
阅读次数:
260
hadoop 常用配置项——转载:core-site.xmlnamevalueDescriptionfs.default.namehdfs://hadoopmaster:9000定义HadoopMaster的URI和端口fs.checkpoint.dir/opt/data/hadoop1/hdfs/...
分类:
其他好文 时间:
2014-11-03 22:08:11
阅读次数:
289
当我动态添加一个hadoop从节点的之后,出现了一个问题:
[root@hadoop current]# hadoop-daemon.sh start datanode
starting datanode, logging to /usr/local/hadoop1.1/libexec/../logs/hadoop-root-datanode-hadoop.out
[root@hadoop ...
分类:
其他好文 时间:
2014-11-01 11:58:13
阅读次数:
304