前言：做运维的很重要的基础工作就是监控，之前都是统计数据入库，然后前端js图表插件出图，费时费力，可定制性差前几天接触到了ELK(logstash, elasticsearch, kibana)这套日志收集展示工具集,的确很方便，但是手头没有那么大的存储啊也不是所有的日志数据都需要，然后就发现了gr...
分类：
其他好文 时间：
2014-09-16 15:30:20
阅读次数：
404
今天重新调整了下配置文件，之前的apache_errorlog未匹配到clientip。1.首先修改shipper.confinput{
file{
type=>"apache-accesslog"
path=>"/var/log/httpd/access_log"
}
file{
type=>"apache-errorlog"
path=>"/var/log/httpd/error_log"
}
}
filter{
if[type..
分类：
其他好文 时间：
2014-09-12 17:24:04
阅读次数：
786
收集流程1nxlog=>2logstash=>3elasticsearch1.nxlog使用模块im_file收集日志文件，开启位置记录功能2.nxlog使用模块tcp输出日志3.logstash使用input-tcp，收集日志，并格式化，输出至eswindows上面的nxlog配置文件nxlog.conf##Thisisasampleconfigurationfile.Seethenxlo..
分类：
Windows程序 时间：
2014-09-10 19:44:21
阅读次数：
1381
zabbix 监控 logstash安装社区扩展包wget http://download.elasticsearch.org/logstash/logstash/logstash-contrib-1.4.2.tar.gz解压后覆盖 /usr/local/logstash-1.4.2/配置Zabbi...
分类：
其他好文 时间：
2014-09-05 18:00:01
阅读次数：
458
[2014-09-05?10:04:26,551][INFO?][node?????????????????????]?[Yukio]?started
[2014-09-05?10:05:49,076][DEBUG][action.search.type???????]?[Yukio]?[logstash-2014.08...
分类：
其他好文 时间：
2014-09-05 14:36:51
阅读次数：
398
logstash在windows中收集日志的时候，会导致写日志的程序不能进行日志的切割（windows提示，文件被占用）从github上下载useJavatoOpenFilehttps://github.com/edwinf/ruby-filewatch/tree/useJavatoOpenFilewgethttps://github.com/jordansissel/ruby-filewatch/archive/master..
分类：
Windows程序 时间：
2014-09-03 18:27:57
阅读次数：
3214
准备工作安装：openssl卸载旧版本apt-get remove opensslapt-get autoremove openssl下载最新版本wget http://www.openssl.org/source/openssl-1.0.1i.tar.gztar -zxvfopenssl-1.0....
分类：
其他好文 时间：
2014-08-30 18:57:19
阅读次数：
3363
系统环境#cat/etc/redhat-release
CentOSrelease6.4(Final)
#uname-a
Linuxlocalhost.localdomain2.6.32-358.el6.x86_64#1SMPFriFeb2200:31:26UTC2013x86_64x86_64x86_64GNU/Linux1.下载软件包#curl-Ohttps://download.elasticsearch.org/logstash/logstash/logstash-1.4.2.tar..
分类：
其他好文 时间：
2014-08-18 18:51:43
阅读次数：
289
实时计算里，需要对日志实时收集，logstash可以做到。目前的版本是1.4.2，官方文档在http://www.logstash.net/docs/1.4.2/，里面有详细的配置说明，使用也很简单。这里主要对logstash的可靠性做了简单的验证intput为file，kill掉logstas.....
分类：
其他好文 时间：
2014-08-17 22:44:32
阅读次数：
2054
前端时间写了个随笔 log4net.NoSql +ElasticSearch 实现日志记录 ，因项目原因需要把日志根java平台的同事集成采用logstash+kibana+elasticsearch+redis结构实现日志统计分析，所以需要一个将log4net日志输出到redis的组件。没有找到现...
分类：
Web程序 时间：
2014-08-01 13:21:35
阅读次数：
491
