1、日志简介 nginx日志主要有两种：访问日志和错误日志。访问日志主要记录客户端访问nginx的每一个请求，格式可以自定义；错误日志主要记录客户端访问nginx出错时的日志，格式不支持自定义。两种日志都可以选择性关闭。 通过访问日志，你可以得到用户地域来源、跳转来源、使用终端、某个URL访问量等相 ...
分类：
其他好文 时间：
2016-05-11 18:03:24
阅读次数：
239
实际工作中，恰好需要处理一个nginx日志，做个简单的分析：引子：开发已经有日志分析平台和工具，但为了查一个问题，需要分析原始日志。要求：原始日志的倒数第二个字段不为空且不为‘-‘的情况下，统计倒数第四个字段不为空且不为‘-‘的且不重复的个数。python脚本如下：#!/usr/b..
分类：
编程语言 时间：
2016-05-08 20:05:55
阅读次数：
786
1.安装LogMiner
以DBA用户身份运行下面2个脚本：
dbmslm.sql用来创建DBMS_LOGMNR包，该包用来分析日志文件。
SQL> @$ORACLE_HOME/rdbms/admin/dbmslm.sql;
Package created.
Grant succeeded.
Synonym created.
dbmslmd.sql用来...
分类：
数据库 时间：
2016-05-06 12:29:07
阅读次数：
208
为什么要使用这个工具：当apache的访问日志默认是不会滚动的，当访问日志过大时，分析日志不方便，打开的时候可能直接就等上1个 小时！！ logrotate是大部分linux系统自带的日志切割工具，配置文件为/etc/logrotate.conf ，简单定义一个对apache日志做切割的实例： vi ...
分类：
其他好文 时间：
2016-05-06 12:02:58
阅读次数：
144
博主对splunk的了解不多，博主的使用目的是为了同步，分析日志。当初的搭建也是为了公司申请牌照需要日志服务器分析日志，顺便自己也对这方面感兴趣就买了本书看了看搭建玩的，后来检查来了博主也给他们演示了下,splunk到底有多强大，博主现在也玩了个大概，具体的命令使用也只..
分类：
其他好文 时间：
2016-04-10 19:38:43
阅读次数：
1321
Android应用中，事件的分发和拦截一直是程序猿们在开发过程中处理事件冲突和自定义控件时遇到的难点。通过反复实践、分析日志信息，绘制出直观的事件分发流程图。...
分类：
移动开发 时间：
2016-04-01 18:30:59
阅读次数：
330
在日常的运维管理活动，日志非常的重要，当发现error时可以从日志了解报错并及时解决。日志分为系统日志,应用日志,和安全日志，经常的分析日志可以了解服务器的硬件状况，性能以及安全，从而采取预防措施及时纠正任务。通常情况下，日志被分散到不同的存储设备上，而企业内部的..
分类：
其他好文 时间：
2016-03-31 19:05:17
阅读次数：
482
简单的日志分析排除命令，不过建议使用goacess日志分析视图化观察比较好，面对一些爬虫攻击，可以在nginx.conf配置文件里调用limitrequst模块来限制连接数，如限制每秒钟的请求数：rate=10r/s，这是要依据业务情况来设置的。1分析日志封IPcd/nginx/logs[root@web100logs]#awk‘{..
分类：
其他好文 时间：
2016-03-08 13:39:37
阅读次数：
146
很多时候我们需要对文件进行一些操作，比如读取并分析日志文件，写入日志文件等等。显然python也内置了对文件进行操作的函数。 读文件： >>> f = open('a.log','r') 这样就打开了一个文件，’r’表示读。当然 还有其它打开方式： ‘w’ :表示写入，如果文件不存在，则创建，如果存...
分类：
编程语言 时间：
2016-01-20 01:03:27
阅读次数：
239
