码迷,mamicode.com
首页 >  
搜索关键字:flume 日志管理    ( 1788个结果
Data Collection with Apache Flume(二)
今天继续讨论几个agent的配置。 第一个agent是从终端捕获特定命令执行的输出结果,并将文件输出到特定目录。先看一下配置的代码: agent2.sources = execsource //指定为从命令获取输出的sourceagent2.sinks = filesink ...
分类:Web程序   时间:2015-03-01 13:07:42    阅读次数:148
oracle的日志管理
redo日志和归档日志的区别:redo是循环切换写的只能恢复最近三个日志文件,归档是一直写的能恢复任何时候的日志文件一句话:归档是加长版的redo###########################################################################################redo文件管理和使用案例1:增加red..
分类:数据库   时间:2015-02-28 18:50:45    阅读次数:220
Data Collection with Apache Flume(一)
首先介绍一下Flume是个神马东东。Flume可以实现从多种数据源获取数据,然后传递到不同的目标路径。通常是利用Flume传送logs到不同的地方,例如从web server收集logs文件然后传送到hadoop cluster进行分析之类的。Flume配置灵活简单,可以实现不同情况的日志传送...
分类:Web程序   时间:2015-02-28 13:01:20    阅读次数:165
SSH(三)资源分类和日志管理
上篇博文已经分别介绍了如何搭建SSH开发环境以及对SSH三个框架的整合。整合完成之后,我们基本上就可以正常的开始一个基于SSH框架开发的项目了。本篇博文介绍的资源分类和日志管理都是一些锦上添花的配置。利用这些,来清晰我们的思路,便利我们的编程。       先来说说资源分类吧。这里的资源分类是指对项目中代码或者配置文件等的一个分类管理。以下截图中的分类只是参考,主要是对于资源分类管理思想上的...
分类:其他好文   时间:2015-02-27 17:06:42    阅读次数:189
MySQL 5.5 日志管理
一、MySQL日志的分类1、错误日志2、一般查询日志3、慢查询日志4、二进制日志5、中继日志6、事务日志二、查看MySQL的日志参数变量mysql>SHOWGLOBALVARIABLESLIKE‘%log%‘; +-----------------------------------------+---------------------------------+ |Variable_name|Val..
分类:数据库   时间:2015-02-26 15:05:58    阅读次数:377
Flume 内存channel的数据持久化
flume-ng 1.5 新增一个Spillable memory channel :http://www.tuicool.com/articles/i2mUfqb虽然可以在sink阻塞时候,把event存入file channel,且file channel在flume崩溃再启动时能恢复数据,但是...
分类:Web程序   时间:2015-02-26 14:37:25    阅读次数:261
Flume-ng安装与使用
一、FlumeNG核心概念二、FlumenNG数据流模型Flume以agent为最小的独立运行单位。一个agent就是一个JVM。单agent由Source、Sink和Channel三大组件构成。Flume的数据流由事件(Event)贯穿始终。事件是Flume的基本数据单位,它携带日志数据(字节数组形式)并且携带有头信息,这些Eve..
分类:Web程序   时间:2015-02-26 00:09:32    阅读次数:1266
HornetQ
https://github.com/flsusp/http-queuehttps://github.com/sfr-network-service-platforms/hq-consolehttps://github.com/btoddb/flume-ng-hornetq-channelhttps...
分类:Web程序   时间:2015-02-24 18:36:28    阅读次数:164
Flume 内置统计
prerequisite: JMX http://www.cnblogs.com/itech/archive/2010/09/16/1827999.html http://download.oracle.com/technetwork/java/javase/6/docs/zh/api/java/l...
分类:Web程序   时间:2015-02-16 18:07:02    阅读次数:331
Flume 源码阅读
Flume架构主要由3个组件,分别是Source,Channel和Sink,3个组件组成Event在Flume中得数据流向或者说流水线,功能可以由Flume的介绍看出:When a Flume source receives an event, it stores it into one or mo...
分类:Web程序   时间:2015-02-15 19:21:33    阅读次数:320
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!