1 介绍 ELK日志管理属于基础设施平台,接入多个应用系统是正常现象,如果接入多个系统的索引文件没有进行权限划分,那么很大程度会出现索引文件误处理现象,为了避免这种情况发生,多用户及权限设置必不可少。 通过Filebeat采集应用日志,发送到redis(或者kafka),通过在filebeat.ym ...
分类:
其他好文 时间:
2019-08-29 09:52:25
阅读次数:
1127
前提:已配置好Redis集群,并设置的有统一的访问密码 架构是filebeat redis集群 logstash elasticsearch,需要修改filebeat的输出和logstash的输入值 filebeat地址:192.168.80.108 redis集群地址:192.168.80.107 ...
分类:
其他好文 时间:
2019-08-29 09:48:30
阅读次数:
359
整体流程 1. filebeat收集openresty应用日志传输到Redis集群中 2. Logstash从Redis集群中拉取数据,并传输到Elasticsearch集群 3. 使用Kibana可视化索引 4. 使用Elasticsearch head管理lasticsearch集群 注:Log ...
分类:
其他好文 时间:
2019-08-28 18:38:31
阅读次数:
91
1. window启动命令:.\filebeat -e -c filebeat.yml https://blog.csdn.net/haozhuxuan/article/details/79753599 https://www.elastic.co/guide/en/beats/filebeat/c ...
分类:
其他好文 时间:
2019-08-26 21:23:52
阅读次数:
89
filebeat+elk日志收集平台搭建流程 1、 整体简介: 模式:单机 平台:Linux - centos - 7 ELK:elasticsearch、logstash、kibana三款开源软件的集合。 FILEBEAT:代替logstash的采集功能,轻量、耗用小。 目前收集的有nginx日志 ...
分类:
其他好文 时间:
2019-08-23 22:12:59
阅读次数:
111
filebeat+elk组合之kafka单机部署 准备: kafka下载链接地址:http://kafka.apache.org/downloads.html 在这里下载kafka_2.12-2.10.0.0.tgz(kafka和zookeeper都用同一个包里的)。 一、安装和配置jdk(下载jd ...
分类:
系统相关 时间:
2019-08-23 22:02:32
阅读次数:
124
原文:ELK+Filebeat 集中式日志解决方案详解 链接:https://www.ibm.com/developerworks/cn/opensource/os-cn-elk-filebeat/index.html?ca=drs- ELK Stack 简介 ELK 不是一款软件,而是 Elast... ...
分类:
其他好文 时间:
2019-08-21 09:49:25
阅读次数:
87
原文:ELK日志系统:Filebeat使用及Kibana如何设置登录认证 根据elastic上的说法: Filebeat is a lightweight, open source shipper for log file data. As the next-generation Logstash ... ...
分类:
其他好文 时间:
2019-08-21 09:31:49
阅读次数:
131
今天10点时候同事报出kibana突然不显示log了,开始紧急排查 1. 从数据源头查起,先看被filebeat监视的log文件是否在更新(一般只要log对应服务在正常运行,log文件中就会有数据持续更新) tail -f log.log 发现log中数据在持续更新,说明数据源头没有问题 2. 查看 ...
分类:
其他好文 时间:
2019-08-13 11:49:46
阅读次数:
1332
基础架构:1/Kibana---->elasticsearch---->Logstash(收集)2/Kibana---->elasticsearch---->filebeat(收集)3/Kibana---->elasticsearch---->Logstash(过滤)---->filebeat(收集)扩展架构:1/Kibana---->elastic
分类:
其他好文 时间:
2019-08-10 13:42:36
阅读次数:
281