elasticsearch安装:3台es均执行相同的安装步骤 filebeat安装 kibana安装 nginx安装 elasticsearch配置 filebeat配置 kibana配置 启动服务 ...
分类:
其他好文 时间:
2020-04-14 12:41:55
阅读次数:
69
目的 建立一个文件夹,文件夹中存放一些文本文件, 系统实时监测此文件夹,当有文件变化时候,自动执行入库功能(将文件内容推送到搜索库), 文件内容可以即时被搜索系统搜索到。 技术依赖 1、 NIFI -- 文件检测入库 2、 ElasticSearch -- 文件内存存储和搜索 3、 Kibana负责 ...
分类:
其他好文 时间:
2020-04-13 09:15:29
阅读次数:
107
elasticsearch : which: no java in (/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin) 查看 elasticsearch 服务状态是,报出以下错误 [root@elk-node1 ~]# systemctl stat ...
分类:
其他好文 时间:
2020-04-11 12:48:34
阅读次数:
385
日志是每个系统最为头疼的地方,杂乱,还多,没有还不行,想管理好的话,得经得起考验,要解决的问题总结如下: (1)高并发 (2)高吞吐量 (3)支持分布式集群 (4)检索要快 简介: 1.Zoomkeeper Kafka的通道 2. Kafka Kafka主要是解决大量日志的处理的分布式发布订阅消息系 ...
分类:
Web程序 时间:
2020-04-08 12:05:55
阅读次数:
124
ELK下载 https://www.elastic.co/cn/downloads/ Elasticsearch搭建 "Elasticsearch" "集群" Logstash搭建 因为没有真实的环境的,我就手动上传了两个log日志文件做测试使用 在Logstash/config下面新增一个配置文件 ...
分类:
其他好文 时间:
2020-04-08 09:50:38
阅读次数:
76
本来想基于docker搭建一套ELK玩一玩日志,奈何难度有点大,没能继续下去,后来转念一想,我是要使用elk来管理日志而已,又不是要做运维,所以直接找一款云上产品直接使用起来就可以了. 这是就上咱阿里云平台上看看啦,想起来他们有个SLS.用法与ELK类似.sls每个月还有500M的免费额度可以使用. ...
分类:
其他好文 时间:
2020-04-06 23:54:16
阅读次数:
367
ELK 是什么? 通俗来讲,ELK 是由 Elasticsearch、Logstash、Kibana 三个开源软件组成的一个组合体,这三个软件当中,每个软件用于完成不同的功能,ELK 又称 ELKstack。 官网: https://www.elastic.co/ ELK 主要优点: 1、处理方式灵 ...
分类:
其他好文 时间:
2020-04-06 10:07:43
阅读次数:
79
**k8s集群日志收集**收集哪些日志K8S系统的组件日志K8SCluster里面部署的应用程序日志日志方案Filebeat+ELKFilebeat(日志采集工具)+Logstach(数据处理引擎)+Elasticserch(数据存储、全文检索、分布式搜索引擎)+Kibana(展示数据、绘图、搜索)容器中的日志怎么收集收集方案:Pod中附加专用日志收集的容器优点:低耦合缺点:每个Pod启动一个日志
分类:
其他好文 时间:
2020-04-05 09:46:15
阅读次数:
75
两种方法配置Spring项目输出JSON到LogStash或者使用FileBeat收集上传到ELK
分类:
编程语言 时间:
2020-04-02 01:20:53
阅读次数:
79
一、访问流追踪 log-trace: 减少代码级别插入日志 详细调用访问链路 唯一请求id,方便搜索 二、日志实时展示 1. 日志收集 使用队列,采用发布订阅模式 Kafka/RabbitMq: 使用logback 配置appender AMQP 消费端直接读取 支持ELK Mqtt: IBM协议, ...
分类:
其他好文 时间:
2020-04-01 14:55:28
阅读次数:
65