# ELK:Elasticsearch + Logstash + Kibana 搭建教程 Shipper:日志收集者。负责监控本地日志文件的变化,及时把日志文件的最新内容收集起来,输出到Redis暂存。Indexer:日志存储者。负责从Redis接收日志,写入到本地文件。Broker:日志Hub,用 ...
分类:
其他好文 时间:
2016-10-11 11:16:49
阅读次数:
318
一、什么是Flume?flume作为cloudera开发的实时日志收集系统,受到了业界的认可与广泛应用。Flume初始的发行版本目前被统称为FlumeOG(originalgeneration),属于cloudera。但随着FLume功能的扩展,FlumeOG代码工程臃肿、核心组件设计不合理、核心配置不标准等缺点暴露出来,尤..
分类:
Web程序 时间:
2016-10-11 00:09:50
阅读次数:
374
这两天用python写了一个自动化测试框架,取名为Auty。准备用来做Web方面的接口测试,以下为Auty框架一步一步的搭建过程—— Auty自动化测试框架第一篇——生成执行列表 Auty自动化测试框架第二篇——读取与执行脚本列表 Auty自动化测试框架第三篇——添加异常处理与日志收集 Auty自动 ...
分类:
编程语言 时间:
2016-09-29 21:16:49
阅读次数:
139
Graylog2是一个日志收集服务器,可以当做syslog服务器使,支持TCP、UDP协议。另外也支持以TCP/UDP方式接收GELF格式的日志,这个格式很简单,就是一个JSON字符串。Graylog2把GELF格式的日志存入ElasticSearch中,另外往MongoDB里写入一些统计信息,伊提供了一个Ruby写的Web应用..
分类:
其他好文 时间:
2016-09-22 18:13:00
阅读次数:
1240
通常,日志被分散的储存不同的设备上。如果你管理数十上百台服务器,你还在使用依次登录每台机器的传统方法查阅日志。这样是不是感觉很繁琐和效率低下。当务之急我们使用集中化的日志管理,例如:开源的syslog,将所有服务器上的日志收集汇总。 集中化管理日志后,日志的统计和检索又成为一件比较麻烦的事情,一般我 ...
分类:
其他好文 时间:
2016-09-17 09:24:03
阅读次数:
162
免费开源分布式系统日志收集框架 Exceptionless 前两天看到了这篇文章,亲身体会了下,确实不错,按照官方的文档试了试本地部署,折腾一番后终于成功,记下心得在此,不敢独享。 本地部署官方wiki .NET 4.6.1 这个因为我装了VS2015,就没有单独再装了 Java JDK 1.8+ ...
分类:
其他好文 时间:
2016-09-12 15:38:05
阅读次数:
217
日志收集框架 Exceptionless 前言 从去年就答应过Eric(Exceptionless的作者之一),在中国会帮助给 Exceptionless 做推广,但是由于各种原因一直没有做这件事情,在此对Eric表示歉意。:) Exceptionless 简介 Exceptionless 是一个开 ...
分类:
其他好文 时间:
2016-09-12 00:21:01
阅读次数:
3357
日志主要包括系统日志、应用程序日志和安全日志。系统运维和开发人员可以通过日志了解服务器软硬件信息、检查配置过程中的错误及错误发生的原因。经常分析日志可以了解服务器的负荷,性能安全性,从而及时采取措施纠正错误。通常,日志被分散的储存不同的设备上。如果你管理数..
分类:
其他好文 时间:
2016-09-09 10:25:00
阅读次数:
165
ELK+kafka构建日志收集系统 原文 http://lx.wxqrcode.com/index.php/post/101.html 原文 http://lx.wxqrcode.com/index.php/post/101.html 背景: 最近线上上了ELK,但是只用了一台Redis在中间作为消 ...
分类:
其他好文 时间:
2016-09-05 12:12:12
阅读次数:
340
上一篇我们介绍了rsyslog配置文件。在现网环境中,无论是为了把日志存储更长的时间还是为了分析日志的方便性,我们通常会把日志发送到日志服务器或是日志收集分析系统上。接下来我们介绍一下如何配置。实验环境:RHEL7实验目的:我们把client上info级别以上的所有日志都发送到日..
分类:
系统相关 时间:
2016-09-01 00:20:51
阅读次数:
332