ELK对nginx日志进行流量监控 一、前言 线上有一套ELK单机版,版本为5.2.1。现在想把nginx访问日志接入到elk里,进行各个域名使用流量带宽的统计分析。要把nginx日志传输到elk上,可以在存有nginx日志的服务器上使用logstash或者filebeat。但是因为logstash ...
分类:
其他好文 时间:
2019-11-12 09:24:53
阅读次数:
137
[TOC] MySQL explain用法 一、explain命令应用 查询数据的方式 1.全表扫描 1)在explain语句结果中type为ALL 2)什么时候出现全表扫描? 2.1 业务确实要获取所有数据 2.2 不走索引导致的全表扫描 ? 2.2.1 没索引 ? 2.2.2 索引创建有问题 ? ...
分类:
数据库 时间:
2019-11-11 00:15:48
阅读次数:
115
操作系统 IP地址 主机名 软件包 角色备注 CentSO7.5x86_64 192.168.200.113 elk-node1 内存:2G CentSO7.5x86_64 192.168.200.114 elk-node2 内存:2G CentSO7.5x86_64 192.168.200.115 ...
分类:
其他好文 时间:
2019-11-09 19:29:20
阅读次数:
98
1.准备 JDK:1.8版本及以上; Kibana:6.2.4版本; 2.安装 2.1.下载解压 wget https://artifacts.elastic.co/downloads/kibana/kibana-6.2.4-linux-x86_64.tar.gz mkdir /opt/elk/ki ...
分类:
其他好文 时间:
2019-11-09 18:00:48
阅读次数:
120
ELK简介ELK是三个开源软件的缩写,分别为:Elasticsearch、Logstash以及Kibana,它们都是开源软件。不过现在还新增了一个Beats,它是一个轻量级的日志收集处理工具(Agent),Beats占用资源少,适合于在各个服务器上搜集日志后传输给Logstash,官方也推荐此工具,目前由于原本的ELKStack成员中加入了Beats工具所以已改名为ElasticStack。一El
分类:
其他好文 时间:
2019-11-09 11:33:13
阅读次数:
96
一、ELK介绍ELK是Elasticsearch、Logstash、Kibana三大开源框架首字母大写简称。二、我司应用1)同花顺PC客户端防外挂报送系统2)同花顺智能客服系统下面简单介绍下我司PC客户端防外挂系统。由于之前没有了解过ELK,在部署同花顺防外挂报送系统时候才逐步知道,同花顺自研了数据流引擎collect及pms,用于采集委托主站上日志到ES上,实时分析功能的kibana未要求安装,
分类:
其他好文 时间:
2019-11-08 09:24:25
阅读次数:
120
1、1、ELK集群部署环境准备1)在2个ELK节点上配置名称解析,通过本地/etc/hosts文件实现。hostnamectlset-hostnameelk-node1(设置主机名。第二台为elk-node2)bash(主机名生效)vim/etc/hosts(修改hosts文件)192.168.1.10elk-node1192.168.1.20elk-node22)需要有java环境(最好是二进制
分类:
其他好文 时间:
2019-11-07 11:26:33
阅读次数:
159
微服务架构的项目,一次请求可能会调用多个微服务,这样就会产生多个微服务的请求日志,当我们想要查看整个请求链路的日志时,就会变得困难,所幸的是我们有一些集中日志收集工具,比如很热门的ELK,我们需要把这些日志串联起来,这是一个很关键的问题,如果没有串联起来,查询起来很是很困难,我们的做法是在开始请求系 ...
分类:
其他好文 时间:
2019-11-07 10:04:20
阅读次数:
92
ELK-Ansible使用手册 ELK-Ansible 是基于 Ansible 的 Playbooks 研发的 ELK集群部署工具。本文将介绍如何使用 ELK-Ansible 快速部署 ELK 集群。 一、准备工作 1. 目标机器若干(至少一台),配置如下: 系统版本 CentOS7 节点之间请确保 ...
分类:
其他好文 时间:
2019-11-06 15:06:00
阅读次数:
115
本篇文章主要讲解如下安装Logstash,logstash依赖于Java环境,首先安装Java,安装脚本如下: 1 yum install java logstash安装 Logstash的安装脚本如下: 1 # 下载logstash的压缩包 2 wget https://artifacts.ela ...
分类:
编程语言 时间:
2019-11-04 17:54:14
阅读次数:
116