Nginx 日志对于大部分人来说是个未被发掘的宝藏，总结之前做某日志分析系统的经验，和大家分享一下 Nginx 日志的纯手工分析方式。 Nginx 日志相关配置有 2 个地方：access_log 和 log_format 。 默认的格式： 相信大部分用过 Nginx 的人对默认 Nginx 日志格 ...
分类：
其他好文 时间：
2017-01-22 13:33:11
阅读次数：
186
前言：每当我们遇到问题抓耳挠腮，一脸懵那啥的时候，也许看一下日志就瞬间豁然开朗，所以，一个易用的日志服务器还是很重要的。我们先不介绍elk，那个牛逼吊炸天的日志分析系统。今天我们先来构建一个小的日志服务器。elk我们以后再说~正文：当我们配置完一个服务，启动报错时..
分类：
数据库 时间：
2017-01-10 22:40:18
阅读次数：
272
现在使用的比较常用的日志分析系统有Splunk和Elk，Splunk功能齐全，处理能力强，但是是商用项目，而且收费高。Elk则是Splunk项目的一个开源实现，Elk是ElasticSearch（Es）、Logstash、Kibana上个项目结合。Es就是基于Lucene的存储，索引的搜索引擎；lo ...
分类：
其他好文 时间：
2017-01-10 17:12:24
阅读次数：
6426
Elasticsearch 是个开源分布式搜索引擎它的特点有分布式零配置自动发现索引自动分片索引副本机制 restful 风格接口多数据源自动搜索负载等。 Logstash 是一个完全开源的工具他可以对你的日志进行收集、分析并将其存储供以后使用如搜索。 kibana 也是一个开源和免费的工具他 Ki ...
分类：
其他好文 时间：
2017-01-09 12:30:20
阅读次数：
515
早上收到502报警，设置的报警规则是502错误两分钟超过500就报警。 排障流程: 日志分析系统报障-->查看日志系统日志-->nginx错误日志-->php错误日志-->php-fpm.log日志 在日志分析系统里面看到产生502报警的机器只有一台xxx.xxx.xxx.170,客户端IP也只有一 ...
分类：
其他好文 时间：
2016-12-29 11:16:26
阅读次数：
305
我们用ELK做日志分析系统，Elasticsearch1.7.3运行了近一年，最近已经将一个集群升级到ES5.1.1，但是遇到问题比较多。所以将另一个集群升级到社区推荐比较稳定的2.4.2。为了便于升级管理，操作都是用ansible来统一执行。一：停止monit守护进程#集群的所有logstash、es进程都是..
分类：
其他好文 时间：
2016-12-26 19:22:50
阅读次数：
342
1.没有日志分析系统1.1运维痛点1.运维要不停的查看各种日志。2.故障已经发生了才看日志(时间问题。)3.节点多，日志分散，收集日志成了问题。4.运行日志，错误等日志等，没有规范目录，收集困难。1.2环境痛点1.开发人员不能登陆线上服务器查看详细日志。2.各个系统都有日志，日..
分类：
其他好文 时间：
2016-12-23 19:48:23
阅读次数：
255
一、简介1、组成ELK由Elasticsearch、Logstash和Kibana三部分组件组成；Elasticsearch是个开源分布式搜索引擎，它的特点有：分布式，零配置，自动发现，索引自动分片，索引副本机制，restful风格接口，多数据源，自动搜索负载等。Logstash是一个完全开源的工具，它可以对你的日..
分类：
其他好文 时间：
2016-12-15 15:03:55
阅读次数：
481
一、概述Elasticsearch是个开源分布式搜索引擎，它的特点有：分布式，零配置，自动发现，索引自动分片，索引副本机制，restful风格接口，多数据源，自动搜索负载等。Logstash是一个开源的用于收集,分析和存储日志的工具。Kibana也是一个开源和免费的工具，Kibana可以为Logstash..
分类：
其他好文 时间：
2016-12-01 22:51:11
阅读次数：
450
大纲： 一、简介 二、Logstash 三、Redis 四、Elasticsearch 五、Kinaba 一、简介 1、核心组成 ELK由Elasticsearch、Logstash和Kibana三部分组件组成； Elasticsearch是个开源分布式搜索引擎，它的特点有：分布式，零配置，自动发现 ...
分类：
其他好文 时间：
2016-11-30 13:39:06
阅读次数：
4268
