最近在测试hadoop+fluentd方案,但是fluentd日志收集系统,需要append功能选择,写日志到HDFS中,官方给出的解决方案是:修改hdfs-site.xml文件,增加如下行:<property>
<name>dfs.webhdfs.enabled</name>
<value>true</value>
</property>..
分类:
移动开发 时间:
2014-12-25 18:49:44
阅读次数:
750
说明:本来研究开源日志的系统是flume,后来发现配置比较麻烦,网上搜索到fluentd也是开源的日志收集系统,配置简单多了,性能不错,所以就改研究这个东东了!官方主页,大家可以看看:fluentd.org,支持300+的plugins,应该是不错的!fluentd是通过hadoop中的webHDFS与HDFS进..
分类:
其他好文 时间:
2014-12-04 18:18:05
阅读次数:
497
系统版本:centos6.4x86.64网络环境:我这台机器处于内网,连不了外网,所以要通过代理上服务端:elasticsearch和kibana、FluentdAggregator安装在一台机器上IP为192.168.1.5客户端:192.168.1.6MysqlServer192.168.1.7:tomcatServer架构图:注意:1、2、3步服务端和客户端都..
分类:
其他好文 时间:
2014-11-11 12:51:42
阅读次数:
972