Logstash+ElasticSearch+Kibana3架构日志系统一,分析系统简介日志监控和分析在保障业务稳定运行时,起到了很重要的作用,不过一般情况下日志都分散在各个生产服务器,且开发人员无法登陆生产服务器,这时候就需要一个集中式的日志收集装置,对日志中的关键字进行监控,触发异..
分类:
其他好文 时间:
2014-10-20 15:21:50
阅读次数:
388
Hadoop日志分析系统启动脚本
#!/bin/bash
#Flume日志数据的根目录
root_path=/flume
#Mapreduce处理后的数据目录
process_path=/process
#hive分区时间
partition=`date "+%Y-%m-%d"`
#获取前一小时的时间:/YYYY-MM-DD/HH
file_path=`date -d "1 hour ...
分类:
其他好文 时间:
2014-10-16 19:41:13
阅读次数:
202
MySQL5.6 如何优化慢查询的SQL语句 -- SQL查询慢日志分析工具和SQL语句执行计划分析...
分类:
数据库 时间:
2014-10-12 14:34:28
阅读次数:
218
#!/usr/bin/envpython
importsys
importdatetime
importsocket
fromfile_backwardsimport*
MONTH={
‘Jan‘:1,
‘Feb‘:2,
‘Mar‘:3,
‘Apr‘:4,
‘May‘:5,
‘Jue‘:6,
‘Jul‘:7,
‘Aug‘:8,
‘Sep‘:9,
‘Oct‘:10,
‘Nov‘:11,
‘Dec‘:12,
}
defparse_apache_date(datestr):
day,..
分类:
编程语言 时间:
2014-09-27 17:47:10
阅读次数:
212
先大概说说简单的结构…前端一个Nginx反向代理,后端一个Nginx instance app for PHP…实际上就是个Discuz,之前面对CC攻击都是预警脚本或者走CDN,但是这次攻击者不再打流量,而是针对数据库请求页面进行攻击,如search操作…帖子ID F5等..从日志分析来看是从3个...
分类:
其他好文 时间:
2014-09-27 02:59:19
阅读次数:
333
慢查询日志打开慢查询日志保存慢查询日志到表中慢查询日志分析Percona Toolkit介绍安装pt-query-digestpt-index-usagept-query-advisorSHOW PROFILEperformance_schema慢查询日志打开慢查询日志慢查询日志,顾名思义就是记录执...
分类:
数据库 时间:
2014-09-24 01:56:15
阅读次数:
519
通过本教程,你将学习到一些常见的崩溃日志案例,以及如何从开发设备和iTunes Connect上获取崩溃日志文件。你还将学习到符号化( symbolication),从日志追踪到代码 。你还将学习调试一个在待定情况下会闪退的应用。让我们开始动手吧!什么是崩溃日志,从哪里能得它?iOS设备上的应用闪退...
分类:
移动开发 时间:
2014-09-22 00:37:51
阅读次数:
461
mysql慢查询:慢查询相关的变量slow_query_log:该参数控制着慢查询的状态,1表示开启状态,0表示关闭状态slow_query_log_file:慢查询日志路径long_query_time:最大查询阀值,查询的时间超过这个值就视为慢查询并且将其记录到慢查询日志中,慢查询日志路径通过slow_query_log_f..
分类:
数据库 时间:
2014-09-19 19:32:46
阅读次数:
290
Aginx网站维护apacheHTTPhttpd基础网站服务httpd访问控制AWStats日志分析虚拟Web主机###############################安装软件包:[root@svr5~]#yum-yinstallhttpdhttpd-manual主要目录和文件主配置文件:/etc/httpd/conf/httpd.conf子配置目录:/etc/httpd/conf.d/网站根目录..
分类:
其他好文 时间:
2014-09-19 19:32:16
阅读次数:
385
作为一个程序员,我们的日常工作之一就是看Log,从Log中发现自己所需要的信息,以及对Log做一些简单的分析和统计。本文分享了我所使用的工具和方法。...
分类:
编程语言 时间:
2014-09-17 23:21:13
阅读次数:
320