ELK日志报警插件ElastAlert 它通过将Elasticsearch与两种类型的组件（规则类型和警报）结合使用。定期查询Elasticsearch，并将数据传递到规则类型，该规则类型确定何时找到匹配项。发生匹配时，将为该警报提供一个或多个警报，这些警报将根据匹配采取行动。 这是由一组规则配置的 ...
分类：
其他好文 时间：
2020-05-30 19:32:24
阅读次数：
84
概念 ELK是Elasticsearch、Logstash、Kibana三大开源框架首字母大写简称。市面上也被成为Elastic Stack。其中Elasticsearch是一个基于Lucene、分布式、通过Restful方式进行交互的近实时搜索平台框架。像类似百度、谷歌这种大数据全文搜索引擎的场景 ...
分类：
其他好文 时间：
2020-05-30 12:55:27
阅读次数：
65
周末了，整理下自己的测试系统，里面的东西还真不少，soft站点，ims（django开发的），registry，owncloud等等。想着，是不是可以都放到supervisord上面，这个机器里面运行了多少软件，一目了然，重启也方便，所以今天重点想着把docker运行的owncloud、regist ...
分类：
Web程序 时间：
2020-05-28 19:40:49
阅读次数：
105
之前写过一篇 设置的，感觉不大对。ELK elasticsearch7 设置账号、权限 还是重新配置一下。 准备资料：elasticsearch7.1.1、kibana7.1.1镜像文件。 在docker下成功安装集群。注意的是，所有的需要安装es相关的ELK版本都要一致，甚至es的插件版本也都是要 ...
分类：
其他好文 时间：
2020-05-27 11:53:08
阅读次数：
372
ELK·Elastic Stack Elastic Stack就一套日志分析系统，前身叫ELK。 E：Elasticsearch L：Logstash，日志收集系统 K：Kibana，数据可视化平台 现加入Beats，是一个数据采集器，可以直接上报给elasticsearch，也可以通过logsta ...
分类：
其他好文 时间：
2020-05-26 00:52:11
阅读次数：
309
一、 现象 用户打开消息推送有概率报错，后续发现推送消息阅读数、点赞数无法正常更新，mysql报警有行锁， DBA抓到有锁表语句，kill该语句未正常恢复，elk日志有大量的java.sql.SQLException: connection holder is null 重启应用恢复 二、分析 根据 ...
分类：
其他好文 时间：
2020-05-23 16:53:18
阅读次数：
50
简介 Supervisor 是一个用 Python 写的进程管理工具，可以很方便的用来在 UNIX-like 系统（不支持 Windows）下启动、重启（自动重启程序）、关闭进程（不仅仅是 Python 进程） Supervisor 是一个 C/S 模型的程序，supervisord 是 serve ...
分类：
系统相关 时间：
2020-05-22 11:20:16
阅读次数：
92
海量日志收集项目总结（1）logagent开发 此部分源码： "logagent源码" 简介 本项目用于系统中日志的采集处理。 对于日志采集业界其实已有成熟的 ELK 方案。 ELK方案 ELK： E：Elasticserach（建立索引） L: Logstash(日志采集) K: Kibana（可 ...
分类：
其他好文 时间：
2020-05-19 10:38:54
阅读次数：
194
NET Core接入ElasticSearch 7.5 写在前面 最近一段时间，团队在升级ElasticSearch（以下简称ES），从ES 2.2升级到ES 7.5。也是这段时间，我从零开始，逐步的了解了ES，中间也踩了不少坑，所以特地梳理和总结一下相关的技术点。 ES小趣闻： 多年前，一个叫做S ...
分类：
Web程序 时间：
2020-05-18 22:57:58
阅读次数：
80
第一部分 概括 ELK是集分布式数据存储、可视化查询和日志解析于一体的日志分析平台。ELK=elasticsearch+Logstash+kibana，三者各司其职，相互配合，共同完成日志的数据处理工作。ELK各组件的主要功能如下： elasticsearch，数据存储以及全文检索； logstas ...
分类：
数据库 时间：
2020-05-14 02:03:08
阅读次数：
148
