正常日志格式：客户端地址 访问者的标识 访问者的验证名字 请求的时间 请求类型 请求的HTTP代码 发送给客户端的字节数 当网站出问题时分析日志，第一步一般都不会是看访问日志。但是也不能忽视它，在访问日志中记录了很多的客户信息，如果你有心，可以从这个日志中获得很多有用的信息！ 访问日志access_ ...
分类：
数据库 时间：
2019-02-05 00:32:36
阅读次数：
233
参考：https://segmentfault.com/a/1190000009745139 ...
分类：
系统相关 时间：
2019-01-28 01:13:40
阅读次数：
190
日志服务支持通过数据接入向导配置采集Nginx日志，并自动创建索引和Nginx日志仪表盘，达到快速采集并分析Nginx日志。 很多个人站长选取Nginx作为服务器搭建网站，在对网站访问情况进行分析时，需要对Nginx访问日志统计分析，从中获得网站的访问量，访问时段等访问情况，传统模式下利用CNZZ模 ...
分类：
其他好文 时间：
2019-01-20 18:56:40
阅读次数：
207
AWS里面可以用Athena来分析S3里面保存的日志，他把日志转换成数据库表的格式，这样就可以通过sql语句进行查询了。这个功能和在windows服务器上用logparser来分析Exchange或者IIS的日志很相似。下面做个演示，通过Cloudtrail记录管理日志，然后通过Athena来查询日志内容。首先选择CloudTrail,CloudTrail是一个日志记录的服务，他和cloudwat
分类：
其他好文 时间：
2019-01-02 12:46:10
阅读次数：
328
消息的存储原理： 消息的文件存储机制: 前面我们知道了一个 topic 的多个 partition 在物理磁盘上的保存路径，那么我们再来分析日志的存储方式。通过 ll /tmp/kafka-logs/testTopic-0/ 命令找到对应 partition 下的日志内容: kafka 是通过分段的 ...
分类：
其他好文 时间：
2018-12-20 19:04:09
阅读次数：
279
今天我司线上kafka消息代理出现错误日志，异常rebalance，而且平均间隔2到3分钟就会rebalance一次，分析日志发现比较严重。错误日志如下 08-09 11:01:11 131 pool-7-thread-3 ERROR [] - commit failed org.apache.ka ...
分类：
其他好文 时间：
2018-12-05 12:23:07
阅读次数：
403
慢日志查询概述：在生产环境中，如果要手工分析日志、查找、分析SQL，显然是个体力活，MySQL提供了日志分析工具MySQLldumpslow是什么？怎么玩？查看命令：showvariableslike‘%slow_query_log%’;showvariableslike‘%slow_query_log%‘;如何开启慢查询日志：命令：setglobalslow_query_log=
分类：
数据库 时间：
2018-11-21 21:00:05
阅读次数：
193
慢日志查询概述：在生产环境中，如果要手工分析日志、查找、分析SQL，显然是个体力活，MySQL提供了日志分析工具MySQLldumpslow是什么？怎么玩？查看命令：showvariableslike‘%slow_query_log%’;showvariableslike‘%slow_query_log%‘;如何开启慢查询日志：命令：setglobalslow_query_log=
分类：
数据库 时间：
2018-11-21 20:59:34
阅读次数：
212
mysqldumpslow不是内部或外部命令，也不是可运行的程序 window系统，mysql版本：5.7.14。 使用mysqldumpslow命令分析日志时，报错：mysqldumpslow'不是内部或外部命令，也不是可运行的程序。 查看目录下，没有mysqldumpslow.exe文件，有一个 ...
分类：
数据库 时间：
2018-11-16 17:31:53
阅读次数：
378
1.四剑客简介 相信接触过linux的大家应该都学过或者听过四剑客，即sed,grep,find,awk,有人对其望而生畏，有人对其爱不释手。参数太多，变化形式太多，使用超级灵活，让一部分人难以适从继而望而生畏，浅尝辄止即罢。有人熟练掌握，使其四剑客为己所用，在分析日志，分析文本，统计，批量修改中游 ...
分类：
系统相关 时间：
2018-10-04 23:53:36
阅读次数：
257
