nginx日志格式的设计根据开发要求我们要在nginx的日志中打印一些特殊信息,所以必须自定义一些日志,#设置user_id的默认值set$user_id"0";#设置user_kind的默认值set$user_kind"-";#设置uuid的默认值set$uuid"_";www.2cto.comif($http_cookie~*"user_id=([0-9]*)"){set$user_id..
分类:
其他好文 时间:
2016-10-22 01:02:28
阅读次数:
213
日志对于统计排错来说非常有利的。本文总结了nginx日志相关的配置如access_log、log_format、open_log_file_cache、log_not_found、log_subrequest、rewrite_log、error_log。nginx有一个非常灵活的日志记录模式。每个级别的配置可以有各自独立的访问日志。日志格式通过log_for..
分类:
其他好文 时间:
2016-10-22 01:00:21
阅读次数:
225
负载均衡keepalived+lvs负载nginx应用tomcatnginx负载通过公网,每一台nginx都负载了多聊链路到后端应用,突然部分客户无法访问业务,负载均衡没有问题,部分nginx服务器到后端应用超时,nginx日志中报出错误;但是keepalived配置为TCP_CHECK{connect_timeout3nb_get_retry3del..
分类:
其他好文 时间:
2016-10-14 07:57:30
阅读次数:
603
1、先查nginx日志 日志表明在出现错误的时候,200请求下降,502&504增加,504居多。 5分钟段,总请求数并无太大波动。可以表明,非攻击所为。 2、查后端java服务 查看日志,在故障时,有一个警告会随着增加: WARN com.alibaba.dubbo.rpc.cluster.sup ...
分类:
其他好文 时间:
2016-10-14 07:00:34
阅读次数:
211
nginx日志分割,可以分割一年内没有分割的日志,以每天一个日志文件打包转载请注明出处:http://lm3810.blog.51cto.com/846925/1860543#!/bin/bash
#hls_nginx_log_cut.sh
#byLouis2016/10/10
logs_path=‘/data/store/logs/www/‘
#日志文件所在路径
files=`ls$logs_path`
backu..
分类:
其他好文 时间:
2016-10-11 14:38:05
阅读次数:
134
shell脚本分析 nginx日志访问次数最多及最耗时的页面(慢查询) 当服务器压力比较大,跑起来很费力时候。我们经常做站点页面优化,会去查找那些页面访问次数比较多,而且比较费时。 找到那些访问次数高,并且比较耗时的地址,就行相关优化,会取得立竿见影的效果的。 下面是我在做优化时候,经常用到的一段s ...
分类:
Web程序 时间:
2016-09-29 00:54:58
阅读次数:
146
初探ELK-以收集nginx日志为例示范搭建一个ELK环境的基本步骤2016/9/22
一、环境
1、RPM
1)收集rpm包
wgethttps://download.elastic.co/logstash/logstash/packages/centos/logstash-2.4.0.noarch.rpm
wgethttps://download.elastic.co/elasticsearch/release/org/elasticsearc..
分类:
其他好文 时间:
2016-09-23 15:20:17
阅读次数:
244
遇到问题:nginx日志包含非常重要的信息。比如upstream_response_time和request_time。现需求监控改值。解决问题:编写python脚本,通过nagioscheck_nrpe插件完成监控。前提了解:nginx日志格式:log_formatmain‘$remote_addr|$time_local|$request|$status|$body_bytes_sent|$..
分类:
移动开发 时间:
2016-09-14 00:29:11
阅读次数:
344
一、目的 将nginx 日志通过普通用户利用rsync公钥认证的方式实时同步到本地服务器上,之后使用elk程序进行处理。 二、遇到问题及解决方法思路 问题1.文件权限:nginx 的日志默认权限如下: 我新建的是普通用户,标准的用户组,用rsync同步时,报个错误,说是没有该文件的权限 问题1解决方 ...
分类:
其他好文 时间:
2016-09-14 00:01:08
阅读次数:
283
初探ELK-logstash使用小结2016/9/12【写在前言】说起处理日志的手段,大家或多或少都听说过ELK(elasticsearch+logstash+kibana),怎么入门呢?咱们从一个小小的目标开始。目标:收集nginx日志,集中展示。不少人对ELK的第一印象,容易觉得它这个工具组合似乎挺难上手的,错!..
分类:
其他好文 时间:
2016-09-12 22:29:13
阅读次数:
289