早期搭建Hadoop集群的时候，在做主机和IP解析的时候，通常的做法是写hosts文件，但是Hadoop集群大了以后做hosts文件很麻烦，每次加新的服务器都需要整个集群重新同步一次hosts文件，另外，如果在同一个域下面做两个集群，做distcp，也需要把两个集群的hosts文件全写完整并完全..
分类：
其他好文 时间：
2015-04-30 20:28:43
阅读次数：
150
Hadoop的distcp命令可以实现将文件从一个hdfs文件系统中拷贝到另外一个文件系统中，如下所示：
$ bin/hadoop distcp -overwrite hdfs://123.123.23.111:9000/hsd/t_url hdfs://123.123.23.156:9000/data/t_url
正常情况下应该出现如下运行结果：...
分类：
其他好文 时间：
2015-04-30 09:00:45
阅读次数：
374
最近在支持业务部门将数据从hadoop0.20.203迁移到hadoop2.4.0的时候，distcp报了几个错误，在这里记录一下：...
分类：
其他好文 时间：
2015-01-06 13:52:39
阅读次数：
375
