今年3月份在公司的内部k8s培训会上,开发同事对应用整合进pod提出了几个问题,主要围绕在java应用的日志统一收集、集中存放和javajvm内存监控数据收集相关的点上,本文将介绍使用filebeat实现pod日志的统一收集,集中存放使用集群外的elasticsearch,后续可以加上kibana及模板文件实现更友好的数据展示。一、准备和测试tomcat基础镜像该镜像主要是配置jdk环境变量和to
分类:
其他好文 时间:
2018-04-24 17:42:02
阅读次数:
826
filebeat ELK 数据收集的者,logstash 是数据的传输和过滤者,同时logstash还可以通过过滤关键字,达到告警功能
分类:
其他好文 时间:
2018-04-22 17:21:40
阅读次数:
528
《Elasticsearch》ESC和mongdb都属于document,NOSQL非关系型数据库。Elasticsearch是一个基于apachelucene(性能最好,功能最全的全文搜索引擎)的搜索服务器,是一个分布式多用户的全文搜索引擎,基于JAVA开发的需要装JDK的包,安装即可。基于restfulweb接口(用于客户端和服务器交互类的软件,更易于实现缓存等机制)。它不仅仅是存储,还会索引
分类:
其他好文 时间:
2018-04-18 22:27:22
阅读次数:
396
filebeat logstash配置模板说明 为了让不同类型的日志记录到不同index,实现日志分类,需要更改默认的配置文件,ELK更新迭代速度很快,网上以前的文档适用于之前的版本 filebeat的docment_type配置项已经在6版本中弃用,请使用本文配置 filebeat配置模板 log ...
分类:
其他好文 时间:
2018-04-18 19:06:12
阅读次数:
1218
filebeat安装部署 filebeat的文件探测配置 filebeat对多行日志的处理 filebeat到kafka的多topic输出 filebeat直接输出到logstash ...
分类:
其他好文 时间:
2018-04-17 16:56:37
阅读次数:
343
环境版本filebeat:6.2.3mysql:5.6.38错误信息{"_index":"mysql-slow-2018.04.17","_type":"doc","_id":"AWLRiDqYhjFMCbqrK5ez","_version":1,"_score":null,"_source":{"@timestamp":"2018-04-17T02:56:22.823Z","offset":10
分类:
数据库 时间:
2018-04-17 14:19:59
阅读次数:
1557
Elasticsearch and kibana and filebeat 轻量级日志监控系统
分类:
其他好文 时间:
2018-04-16 14:40:18
阅读次数:
230
如何通过FILEBEAT,LOGSTASH,ES,KIBNA实现数据的采集总体参考网址:https://www.olinux.org.cn/elk/1157.html官方网址:https://www.elastic.co/guide/en/beats/filebeat/6.2/filebeat-ge ...
分类:
其他好文 时间:
2018-04-15 13:41:09
阅读次数:
201
filebeat+redis+elk系统:centos7.1x86_64filebeat:6.2.3logstash:6.2.3elasticsearch:6.2.3kibana:6.2.3架构如下:配置yum源:导入验证文件rpm--importhttps://artifacts.elastic.co/GPG-KEY-elasticsearchrpm--importhttps://package
分类:
其他好文 时间:
2018-04-08 10:48:01
阅读次数:
726