ElasticStack从2019年1月29日的6.6.0版本的开始,引入了索引生命周期管理的功能,新版本的Filebeat则默认的配置开启了ILM,导致索引的命名规则被ILM策略控制。 加上这个配置就好了: filebeat 配置关闭 ILM 即可解决Index Pattern不生效的问题 具体配 ...
分类:
其他好文 时间:
2020-02-23 18:34:03
阅读次数:
481
```YAML#=========================== Filebeat prospectors =============================filebeat.prospectors:- type: log #指定文件的输入类型log(默认)或者stdin。 enabl... ...
分类:
其他好文 时间:
2020-02-23 15:02:30
阅读次数:
83
分类: "ELK" undefined 第1章 ELK简介 第2章: 传统日志分析需求 第3章: 日志收集分类 第4章 准备ES单机环境 第6章: filebeat收集Nginx的json格式日志 1.上面方案不完善的地方 2.理想中的情况 3.目标 4.修改nginx配置文件使日志转换成json ...
分类:
其他好文 时间:
2020-02-18 14:35:25
阅读次数:
89
需求1.开发人员不能登录线上服务器查看日志2.各个系统都有日志,日志分散难以查找3.日志数据量大,查找慢,数据不够实时解决办法:部署ELK平台ELK介绍ELK是三个开源软件的缩写,分别表示:Elasticsearch,Logstash,Kibana,它们都是开源软件。新增了一个FileBeat,它是一个轻量级的日志收集处理工具(Agent),Filebeat占用资源少,适合于在各个服务器上搜集日志
分类:
其他好文 时间:
2020-02-18 09:40:00
阅读次数:
367
故障现象:执行kubectlcreate-ffilebeat.yml报错如下:error:unabletorecognize"filebeat.yml":nomatchesforkind"DaemonSet"inversion"extensions/v1beta1"解决办法:将yml配置文件内的api接口修改为apps/v1,导致原因为之间使用的kubernetes版本是1.14.x版本,1.16
分类:
其他好文 时间:
2020-02-05 09:34:08
阅读次数:
718
文章索引: elasticsearch && filebeat "delete old data in elasticsearch" "centos6下filebeat多开问题 " zabbix "zabbix server优化与迁移 " python && django "python datet ...
分类:
其他好文 时间:
2020-01-31 17:24:20
阅读次数:
65
ETCD 日志收集项目 为什么要自己写不用ELK? ELK: 部署的时候麻烦每一个filebeat都需要配置一个配置文件 使用etcd来管理被收集的日志项。 项目的架构 上节课项目进度 1. kafka:消息队列 2. tailf:从文件里读日志 3. go ini:解析配置文件 今日内容 etcd ...
分类:
其他好文 时间:
2020-01-29 10:58:36
阅读次数:
193
基于ES内置及自定义用户实现kibana和filebeat的认证
分类:
其他好文 时间:
2020-01-25 14:11:17
阅读次数:
60
基于ES内置及自定义用户实现kibana和filebeat的认证 ...
分类:
其他好文 时间:
2020-01-24 17:29:46
阅读次数:
208
Filebeat收集Docker日志 1 安装docker [root@node4 ~]# yum install -y yum-utils device-mapper-persistent-data lvm2 [root@node4 ~]# yum update [root@node4 ~]# y ...
分类:
其他好文 时间:
2020-01-19 21:55:22
阅读次数:
223