最近做日志分析,发现logstash较符合自己的需求,Logstash:做系统log收集,转载的工具。同时集成各类日志插件,对日志查询和分析的效率有很大的帮助。一般使用shipper作为log收集、indexer作为log转载。Logstashshipper收集log并将log转发给redis存储Logstashindexer从redis中读..
分类:
其他好文 时间:
2015-04-09 17:52:55
阅读次数:
524
logstash中的类型
array
boolean
bytes
codec
hash
number
password
path
string
arrayAn array can be a single string value or multiple values. If you specify the same setting multiple times, it appends to the...
分类:
其他好文 时间:
2015-04-01 17:38:19
阅读次数:
161
原文链接:http://www.cnblogs.com/buzzlight/p/logstash_elasticsearch_kibana_log.html日志的分析和监控在系统开发中占非常重要的地位,系统越复杂,日志的分析和监控就越重要,常见的需求有:根据关键字查询日志详情监控系统的运行状况统计分...
分类:
其他好文 时间:
2015-03-21 11:01:45
阅读次数:
227
elk 日志分析系统Logstash+ElasticSearch+Kibana3
* logstash 管理日志和事件的工具
* ElasticSearch 搜索
* Kibana3 功能强大的数据显示客户端
* redis 缓存安装
logstash-1.4.2-1_2c0f5a1.noarch.rpm
elasticsearch-1.4.4.noarch.rpm
- logstash-...
分类:
其他好文 时间:
2015-03-20 12:59:41
阅读次数:
832
rsyslog日志收集配置rsyslog服务器收集各服务器的日志,并汇总,再由logstash处理请查看上一篇文章http://bbotte.blog.51cto.com/6205307/1613571客户端/发送端web服务器# yum install rsyslog -y# vim /etc/r...
分类:
其他好文 时间:
2015-03-12 13:07:53
阅读次数:
273
第一版:logstash + es第二版:kafka 替换 logstash的方案
分类:
其他好文 时间:
2015-03-09 22:23:07
阅读次数:
221
一、pt-query-digest工具简介
pt-query-digest是用于分析mysql慢查询的一个工具,它可以分析binlog、General log、slowlog , 也可以通过show processlist或者通过tcpdump抓去的mysql协议数据来进行分析。可以把分析结果输出到文件中,分析过程是先对查询语句的条件进行参数化,然后对参数化以后的查询进行分组统计,统计出各查询的...
分类:
数据库 时间:
2015-03-09 12:56:44
阅读次数:
295
这是之前Logstash+kibana+ ElasticSearch+redis 安装时,自己整理的初学者容易看懂的资料,按照以下的步骤也已经完成了安装。这里有二台服务器: 192.168.148.201logstash index,redis,ElasticSearch,kibana,JDK...
分类:
其他好文 时间:
2015-03-02 18:24:15
阅读次数:
331
logstash通过rsyslog对nginx的日志收集和分析http://bbotte.blog.51cto.com/6205307/1613571logstash&elasticsearch&kibana的安装和配置http://bbotte.blog.51cto.com/6205307/1614453这一篇文章里面是以nginx打补丁的方式实现rsyslog把nginx的日志同步到logstash做分..
分类:
其他好文 时间:
2015-02-26 18:44:35
阅读次数:
264
rsyslog日志收集配置rsyslog服务器收集各服务器的日志,并汇总,再由logstash处理请查看上一篇文章http://bbotte.blog.51cto.com/6205307/1613571客户端/发送端web服务器#yuminstallrsyslog-y
#vim/etc/rsyslog.conf
*.*@192.168.10.1:514
#vim/etc/bashrc#收集其他服务器的操..
分类:
其他好文 时间:
2015-02-14 20:09:27
阅读次数:
314