core-site.xml (namenode进程配置文件) <configuration> <property> <name>fs.default.name</name> <value>hdfs://hadoop-master:9000</value> </property> <property>
分类：
其他好文 时间：
2016-02-27 16:25:13
阅读次数：
145
1.hadoop-2.2.0配置eclipse插件( windows/linux ) http://www.cnblogs.com/kinglau/p/3802705.html 2.Eclipse下搭建Hadoop2.4.0开发环境 http://www.cnblogs.com/kinglau/p/
分类：
系统相关 时间：
2016-01-30 17:48:41
阅读次数：
166
dfs.block.access.key.update.interval=600dfs.block.access.token.enable=falsedfs.block.access.token.lifetime=600dfs.blockreport.initialDelay=0dfs.blockr...
分类：
其他好文 时间：
2015-12-25 15:19:06
阅读次数：
575
初次接触Hadoop，了解了Hadoop安装包的目录结构，和大家分享下：bin：Hadoop最基本的管理脚本和使用脚本的目录，这些脚本是sbin目录下管理脚本的基础实现，用户可以直接使用这些脚本管理和使用Hadoop。etc：Hadoop配置文件所在的目录，包括core-site,xml、hdf.....
分类：
其他好文 时间：
2015-12-23 07:05:10
阅读次数：
125
记录一下Hadoop的配置和说明，用到新的配置项会补充进来，不定期更新。以配置文件名划分以hadoop 1.x配置为例core-site.xmlnamevalueDescriptionfs.default.namehdfs://hadoopmaster:9000定义HadoopMaster的URI和...
分类：
其他好文 时间：
2015-12-03 23:08:09
阅读次数：
168
续上篇整理一下hdfs相关的配置项namevalueDescriptiondfs.default.chunk.view.size32768namenode的http访问页面中针对每个文件的内容显示大小，通常无需设置。dfs.datanode.du.reserved1073741824每块磁盘所保留的...
分类：
其他好文 时间：
2015-12-03 22:48:46
阅读次数：
212
续上篇namevalueDescriptionhadoop.job.history.locationjob历史文件保存路径，无可配置参数，也不用写在配置文件里，默认在logs的history文件夹下。hadoop.job.history.user.location用户历史文件存放位置io.sort....
分类：
其他好文 时间：
2015-12-03 22:47:28
阅读次数：
184
问题描述：采用flume上传到HDFS通过原生的sink一直会报如下错误：flume支持lzo压缩前提条件：1、flume机器节点上安装有lzo库hadoop库。2、flume启动的时候配置过hadoop环境变量。3、hadoop配置支持lzo格式压缩。解决问题：
分类：
Web程序 时间：
2015-12-03 15:44:41
阅读次数：
839
配置好eclipse连接hadoop：参考：http://www.powerxing.com/hadoop-build-project-using-eclipse/ http://blog.csdn.net/dandingyy/article/details/7357619如果hdfs文件目录显.....
分类：
系统相关 时间：
2015-11-30 20:23:18
阅读次数：
171
官网链接hadoop配置文件主页：http://hadoop.apache.org/docs/r2.5.2/HDFS hapdoop HA全分布配置:http://hadoop.apache.org/docs/r2.5.2/hadoop-project-dist/hadoop-hdfs/HDFSHi...
分类：
其他好文 时间：
2015-11-17 18:49:02
阅读次数：
181
