统计下面字段中event.tags的值(红色内容) { "url": "http:\/\/icache.sinaimg.cn\/006gPXD2gw1exo8u4i7mkj30f00qotgg.lar", "size": "10.79", "id": "295785", "action": "PUSH", "toidc": "bj", "type": "ACCE...
分类:
其他好文 时间:
2015-11-04 11:35:38
阅读次数:
241
近些年随着DevOps概念越来越收到重视,除了传统的Splunk,Zabbix外在开源领域也有越来越多的软件可供使用.从数据收集,时序数据库,图形展示等主要方面有各类可扩展的软件用于搭建一个数据监控平台(详细列表),Logstash+elasticsearch+kibana算是被写的比较多的,本.....
分类:
其他好文 时间:
2015-10-31 17:13:41
阅读次数:
671
一、创建日志切割脚本nginx-log#!/bin/bash##零点执行该脚本##nginx日志文件所在的目录LOGS_PATH=/var/log/nginx/##获取昨天的yyyy-MM-ddYESTERDAY=$(date-d"yesterday"+%Y-%m-%d)##重命名日志文件mv${LOGS_PATH}/access.log${LOGS_PATH}/access_${YESTERDAY}.logmv${LOGS_PATH..
分类:
系统相关 时间:
2015-10-24 19:02:38
阅读次数:
263
先上链接,http://loganalyzer.adiscon.com/articles/using-mongodb-with-rsyslog-and-loganalyzer/ 思路很简单,服务器集群中的各个服务器将日志发给本机的rsyslog,本机的rsyslog再传输到中央rsyslog,rsyslog...
分类:
Web程序 时间:
2015-10-21 17:43:03
阅读次数:
144
vim /usr/local/logstash/etc/hello_search.conf输入下面:input { stdin { type => "human" }}output { stdout { codec => rubydebug } elasticsearch { ...
分类:
其他好文 时间:
2015-10-21 12:36:53
阅读次数:
385
转载:http://my.oschina.net/duxuefeng/blog/3175701,准备master:10.1.5.241slave01:10.1.5.242在服务器端和客户端分别安装rsyslog[root@master ~]# yum -y rsyslog[root@master ~...
分类:
其他好文 时间:
2015-10-20 16:31:10
阅读次数:
282
最近写了一个程序,实时读取rsyslog日志,但是遇到一个问题:mysql插入速度存在延时,速度非常慢,于是开始了排查;1. 分析程序,将认为比较耗时的地方进行线程分析,无效;2. 按照网上说的,多行插入,commit都没有效果;3. 重装mysql驱动,无效;4. 编写简单的测试语句插入数据库,发...
分类:
数据库 时间:
2015-10-15 20:06:26
阅读次数:
268
1>vi/usr/local/webserver/nginx/logs/cut_nginx_log.sh#!/bin/bash
#function:cutnginxlogfilesforlnmp
#author:http://lnmp.org
#setthepathtonginxlogfiles
log_files_path="/usr/local/webserver/nginx/logs/"
log_files_dir="/usr/local/webserver/nginx/logs/old/"
#..
分类:
其他好文 时间:
2015-10-13 12:26:12
阅读次数:
197
rsyslog默认只可以传送系统的日志,比如DHCP,cron等,现在要传送一个服务的日志到远端的rsyslog服务器,该怎么实现呢?解决方法:要使用rsyslog的imfile模块。参考官方url:http://www.rsyslog.com/doc/v8-stable/configuration/modules/imfile.html参考网上url:http://www.t..
分类:
其他好文 时间:
2015-10-10 12:40:03
阅读次数:
213