目前java应用日志收集都是采用日志框架(slf4j、apache commons logging)+日志系统（log4j、log4j2、LogBack、JUL等）的方式。而针对在分布式环境需要实时分析统计的日志，一般采用apache flume、facebook scribe等分布式日志收集系统。...
分类：
编程语言 时间：
2016-04-22 19:49:21
阅读次数：
409
目录： 1、功能 2、服务器 3、管理对应配置文件 4、脚本相关 5、puppet配置相关 6、puppet客户端安装脚本 7、主机配置文件新增节点详细 8、新增文件项目 9、puppet管理命令 一、配置管理puppet 1、功能： 管理rsync配置文件及scribe配置文件 2、服务器： PU ...
分类：
其他好文 时间：
2016-04-08 14:39:08
阅读次数：
188
作为一个messaging system，Kafka遵循了传统的方式，选择由producer向broker push消息并由consumer从broker pull消息。一些logging-centric system，比如Facebook的Scribe和Cloudera的Flume,采用非常不同的 ...
分类：
其他好文 时间：
2016-04-06 23:03:53
阅读次数：
297
以下是所有代码： [cpp] view plain copy #include "stdafx.h" #include <osgDB/ReadFile> #include <osgViewer/Viewer> #include <osg/Node> #include <osgFX/Scribe> #
分类：
其他好文 时间：
2016-03-02 17:53:50
阅读次数：
475
系统CentOS6.2 x86_64 1.yum安装gcc,flex,m4,python/python-devel,ruby,libevent/libevent-devel,openssl/openssl-devel,bzip2/bzip2-devel,zlib/zlib-devel,bison,a
分类：
其他好文 时间：
2016-02-29 12:43:54
阅读次数：
378
scribe、chukwa、kafka、flume日志系统对比 1. 背景介绍许多公司的平台每天会产生大量的日志（一般为流式数据，如，搜索引擎的pv，查询等），处理 这些日志需要特定的日志系统，一般而言，这些系统需要具有以下特征：（1） 构建应用系统和分析系统的桥梁，并将它们之间的关联解耦；（2）
分类：
Web程序 时间：
2016-02-26 18:56:17
阅读次数：
238
在网上找了一个python的scribe client使用方法 依赖的模块： pip install facebook-scribe pip install thrift 代码例子： #!/usr/bin/python import sys from scribe import scribe fro
分类：
编程语言 时间：
2016-02-05 18:31:25
阅读次数：
188
scribe配置文件详解1.全局配置项（1）port：指示scribe服务器在哪一个端口上监听，默认是0，通过命令行参数选项-P可以指定端口，也能够通过配置文件指定。在源代码中就赋值给变量port。（2）max_msg_per_second：默认值是0，如果这个参数值是0将被忽略。随着最近的改变这个参数..
分类：
其他好文 时间：
2015-12-23 18:04:56
阅读次数：
185
问题导读：1.Flume-NG与Scribe对比，Flume-NG的优势在什么地方？2.架构设计考虑需要考虑什么问题？3.Agent死机该如何解决？4.Collector死机是否会有影响？5.Flume-NG可靠性(reliability)方面做了哪些措施？美团的日志收集系统负责美团的所有业务日志的...
分类：
Web程序 时间：
2015-08-27 18:36:58
阅读次数：
375
问题导读：1.Flume-NG与Scribe对比，Flume-NG的优势在什么地方？2.架构设计考虑需要考虑什么问题？3.Agent死机该如何解决？4.Collector死机是否会有影响？5.Flume-NG可靠性(reliability)方面做了哪些措施？美团的日志收集系统负责美团的所有业务日志的...
分类：
Web程序 时间：
2015-08-27 18:07:42
阅读次数：
249
