今天继续讨论几个agent的配置。 第一个agent是从终端捕获特定命令执行的输出结果,并将文件输出到特定目录。先看一下配置的代码: agent2.sources = execsource //指定为从命令获取输出的sourceagent2.sinks = filesink ...
分类:
Web程序 时间:
2015-03-01 13:07:42
阅读次数:
148
redo日志和归档日志的区别:redo是循环切换写的只能恢复最近三个日志文件,归档是一直写的能恢复任何时候的日志文件一句话:归档是加长版的redo###########################################################################################redo文件管理和使用案例1:增加red..
分类:
数据库 时间:
2015-02-28 18:50:45
阅读次数:
220
首先介绍一下Flume是个神马东东。Flume可以实现从多种数据源获取数据,然后传递到不同的目标路径。通常是利用Flume传送logs到不同的地方,例如从web server收集logs文件然后传送到hadoop cluster进行分析之类的。Flume配置灵活简单,可以实现不同情况的日志传送...
分类:
Web程序 时间:
2015-02-28 13:01:20
阅读次数:
165
上篇博文已经分别介绍了如何搭建SSH开发环境以及对SSH三个框架的整合。整合完成之后,我们基本上就可以正常的开始一个基于SSH框架开发的项目了。本篇博文介绍的资源分类和日志管理都是一些锦上添花的配置。利用这些,来清晰我们的思路,便利我们的编程。
先来说说资源分类吧。这里的资源分类是指对项目中代码或者配置文件等的一个分类管理。以下截图中的分类只是参考,主要是对于资源分类管理思想上的...
分类:
其他好文 时间:
2015-02-27 17:06:42
阅读次数:
189
一、MySQL日志的分类1、错误日志2、一般查询日志3、慢查询日志4、二进制日志5、中继日志6、事务日志二、查看MySQL的日志参数变量mysql>SHOWGLOBALVARIABLESLIKE‘%log%‘;
+-----------------------------------------+---------------------------------+
|Variable_name|Val..
分类:
数据库 时间:
2015-02-26 15:05:58
阅读次数:
377
flume-ng 1.5 新增一个Spillable memory channel :http://www.tuicool.com/articles/i2mUfqb虽然可以在sink阻塞时候,把event存入file channel,且file channel在flume崩溃再启动时能恢复数据,但是...
分类:
Web程序 时间:
2015-02-26 14:37:25
阅读次数:
261
一、FlumeNG核心概念二、FlumenNG数据流模型Flume以agent为最小的独立运行单位。一个agent就是一个JVM。单agent由Source、Sink和Channel三大组件构成。Flume的数据流由事件(Event)贯穿始终。事件是Flume的基本数据单位,它携带日志数据(字节数组形式)并且携带有头信息,这些Eve..
分类:
Web程序 时间:
2015-02-26 00:09:32
阅读次数:
1266
https://github.com/flsusp/http-queuehttps://github.com/sfr-network-service-platforms/hq-consolehttps://github.com/btoddb/flume-ng-hornetq-channelhttps...
分类:
Web程序 时间:
2015-02-24 18:36:28
阅读次数:
164
prerequisite: JMX http://www.cnblogs.com/itech/archive/2010/09/16/1827999.html http://download.oracle.com/technetwork/java/javase/6/docs/zh/api/java/l...
分类:
Web程序 时间:
2015-02-16 18:07:02
阅读次数:
331
Flume架构主要由3个组件,分别是Source,Channel和Sink,3个组件组成Event在Flume中得数据流向或者说流水线,功能可以由Flume的介绍看出:When a Flume source receives an event, it stores it into one or mo...
分类:
Web程序 时间:
2015-02-15 19:21:33
阅读次数:
320