一、ELK 介绍 ELK 构建在开源基础之上，让您能够安全可靠地获取任何来源、任何格式的数据，并且能够实时地对数据进行搜索、分析和可视化。 最近查看 ELK 官方网站，发现新一代的日志采集器 Filebeat，他是 Beats 家族其中的一员，性能超越 logstash，部署简单，占用资源少，可以很 ...
分类：
其他好文 时间：
2019-05-10 16:23:53
阅读次数：
242
1.filebeat配置文件:filebeat.inputs:- type: log enabled: true backoff: "1s" tail_files: false paths: - /usr/local/nginx/logs/access-json.log fields: filety ...
分类：
其他好文 时间：
2019-05-10 13:20:00
阅读次数：
378
欢迎关注个人公众号“没有故事的陈师傅”搭建这个平台的初衷只是为了我和我的两个小伙伴来更好的学习es以及周边组件，欲善其事，必利其器，只是单纯的去学习理论知识是不够的，理论与操作相结合，才能学的更扎实。环境配置：使用自己的两台1v2g阿里云主机以及好友颖枞的一台1v2gvps，共计三台主机环境架构如下：三台主机的环境分别如下：node1：elasticsearch6.4+filebeatnode2：
分类：
其他好文 时间：
2019-05-08 18:58:03
阅读次数：
601
1.查询镜像 docker search filebeat 2.拉取镜像 我此处选择的是prima/filebeat docker pull prima/filebeat 3.创建配置文件 ###################### Filebeat Configuration Example # ...
分类：
其他好文 时间：
2019-04-27 23:59:03
阅读次数：
850
1、pom.xml配置文件 2、log4j2.xml配置信息 3、logstash配置信息--test4.conf 4、启动logstash$ ./logstash -f ../config/test4.conf & ...
分类：
其他好文 时间：
2019-04-23 17:20:53
阅读次数：
232
1 介绍组件 Filebeat是一个日志文件托运工具，在你的服务器上安装客户端后，filebeat会监控日志目录或者指定的日志文件，追踪读取这些文件（追踪文件的变化，不停的读）。 Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者规模的网站中的所有动作流数据。 ElasticSear ...
分类：
其他好文 时间：
2019-04-09 20:55:27
阅读次数：
221
经反馈，新部署的服务器上filebeat占用的cpu过高，且内存只增不减。 而据我了解filebeat非常轻量级，正常情况下占用的资源几乎都能忽略不计，所以怀疑是filebeat本身出了问题。 第一时间查看filebeat日志（默认路径/var/log/filebeat/filebeat），发现有大 ...
分类：
其他好文 时间：
2019-04-09 20:32:03
阅读次数：
691
#安装elasticsearch-5.3.1.tar.gz(单节点安装) tar xf elasticsearch-5.3.1.tar.gz cd elasticsearch-5.3.1 vim config/elasticsearch.yml #修改配置文件 path.data: /data/el ...
分类：
其他好文 时间：
2019-04-03 10:43:54
阅读次数：
144
[TOC] elk简介 ELK是三个开源软件的缩写，分别表示：Elasticsearch , Logstash, Kibana , 它们都是开源软件。新增了一个FileBeat，它是一个轻量级的日志收集处理工具(Agent)，Filebeat占用资源少，适合于在各个服务器上搜集日志后传输给Logst ...
分类：
其他好文 时间：
2019-03-25 01:20:31
阅读次数：
393
一、Java API操作 1. API基本操作 2. 条件查询QueryBuilder 3. 映射相关操作 二、IK分词器 1. IK分词器的安装 2. IK分词器的使用 三、Logstash 1. Logstash简介 2. Logstash 安装 3. Logstash 配置 四、Kibana ...
分类：
其他好文 时间：
2019-03-24 13:50:30
阅读次数：
181
