elk+redis 搭建nginx日志分析平台 logstash,elasticsearch,kibana 怎么进行nginx的日志分析呢？首先，架构方面，nginx是有日志文件的，它的每个请求的状态等都有日志文件进行记录。其次，需要有个队列，redis的list结构正好可以作为队列使用。然后分析使 ...
分类：
其他好文 时间：
2018-06-26 22:31:55
阅读次数：
196
Kibana从5.5开始不提供认证功能，想用官方的认证X-Pack收费 ... 自己动手吧，用nginx的代理加apache生成的密码认证文件。环境：ubuntu16.04 安装nginxapt-get install nginx 增加kibana的nginx配置文件cat /etc/nginx/s ...
分类：
其他好文 时间：
2018-06-26 16:12:22
阅读次数：
167
一、ELK介绍 分析数据，日志，统计，聚合分析，了解用户使用使用虚拟机情况。 openstack使用elk的原因：组件多日志多。排查定位问题方便，统一收集错误。创建虚拟机时会生成日志，若出错会产生日志，及时建立模型，可以分析问题。在大量虚拟机环境下，可以对日志进行聚合分析，进行业务分析。估算vm创建 ...
分类：
其他好文 时间：
2018-06-24 23:48:07
阅读次数：
431
Elasticsearch X-pack 监控 kibana ...
分类：
其他好文 时间：
2018-06-22 16:32:22
阅读次数：
1071
一.配置nginx 二、配置logstash 三、Kibana展示 Head插件查看： ...
分类：
Web程序 时间：
2018-06-22 13:24:14
阅读次数：
214
1.实验环境： 使用8台CentOS主机，实现filebeat+redis+logstash+els集群(3台)+kibana来完成搜索日志相关内容，目标：filebeat来完成收集本机http数据，收集完成后发送给redis，redis主要是来避免数据量过大，logstash处理不过来，logstash是用来格式化数据，将收集来的数据格式化成指定格式，els集群是将格式化完
分类：
其他好文 时间：
2018-06-21 22:28:32
阅读次数：
226
ELK MAC环境搭建 本文旨在记录elasticsearch、logstash、kibana在mac下的安装与启动。 先决条件 java8 mac软件管理工具brew brew相关命令 elasticsearch mac安装elasticsearch elasticsearch的相关安装位置 安装 ...
分类：
系统相关 时间：
2018-06-21 19:47:39
阅读次数：
1859
一、Kibana安装 Kibana 是为 Elasticsearch 设计的开源分析和可视化平台。你可以使用 Kibana 来搜索，查看存储在 Elasticsearch 索引中的数据并与之交互。你可以很容易实现高级的数据分析和可视化，以图表的形式展现出来。 浏览器访问10.0.0.22:5601， ...
分类：
其他好文 时间：
2018-06-20 21:19:08
阅读次数：
179
参考文档：http://blog.51cto.com/ls40905250/1915280 https://blog.csdn.net/zsjwish/article/details/79792212 https://blog.csdn.net/yanggd1987/article/details/ ...
分类：
其他好文 时间：
2018-06-18 20:23:35
阅读次数：
526
本次构架图如下 说明： 1，前端服务器只启动轻量级日志收集工具filebeat（不需要JDK环境） 2，收集的日志不进过处理直接发送到redis消息队列 3，redis消息队列只是暂时存储日志数据，不需要进行持久化 4，logstash从redis消息队列读取数据并且按照一定规则进行过滤然后存储至e ...
分类：
其他好文 时间：
2018-06-18 12:40:32
阅读次数：
787
