#1、安装ElasticSearch ###拉取镜像 docker pull docker.elastic.co/elasticsearch/elasticsearch:7.1.1 ###创建资料卷 docker volume create es-data docker volume create ...
分类:
其他好文 时间:
2021-06-28 21:17:34
阅读次数:
0
一、EFK下载 git clone https://github.com/cuishuaigit/k8s-monitor.git ...
分类:
其他好文 时间:
2020-12-09 12:12:34
阅读次数:
6
ELK是一种日志收集,分析的组合软件。ELK/EFK的组成部分,分别是:elasticsearch,logstash,kibanaelasticsearch(简称es数据库):负责数据的存储,数据的分析,数据的搜索,是基于luncene做的二次开发。(es数据库是非关系型数据库)logstash:负责客户端日志收集工具,替代工具。(filebeat)kibana:负责数据的展示,查询。
分类:
其他好文 时间:
2020-09-17 22:03:38
阅读次数:
37
efk就是目前比较受欢迎的日志管理系统。kubernetes可以实现efk的快速部署和使用,通过statefulset控制器部署elasticsearch组件,用来存储日志数据, 还可通过volumenclaimtemplate动态生成pv实现es数据的持久化。通过deployment部署kiban ...
分类:
其他好文 时间:
2020-07-19 23:41:50
阅读次数:
166
最近,在对公司容器云的日志方案进行设计的时候,发现主流的ELK或者EFK比较重,再加上现阶段对于ES复杂的搜索功能很多都用不上最终选择了Grafana开源的Loki日志系统,下面介绍下Loki的背景。 背景和动机 当我们的容器云运行的应用或者某个节点出现问题了,解决思路应该如下: 我们的监控使用的是 ...
分类:
其他好文 时间:
2020-07-06 16:25:42
阅读次数:
92
k8s集群上会跑各种各样的系统和应用程序的pod,而为了快速发现问题和更好的做日志监控,就必须要做日志的采集和集中存储展示了。综合考虑之下,我们推荐使用EFK技术栈来实现这个目的。k8s日志采集架构选型1,每台节点采用DaemonSet部署agent:原理:每台节点采用DaemonSet部署一个采集日志的agent,从/var/log/containers/目录采集所有容器的日志,而容器中的日志需
分类:
其他好文 时间:
2020-06-13 10:52:12
阅读次数:
234
在用户根目录创建个filebeat.docker.yml文件,文件内容如下 filebeat.config: modules: path: ${path.config}/modules.d/*.yml reload.enabled: false filebeat.autodiscover: prov ...
分类:
其他好文 时间:
2020-06-11 18:10:21
阅读次数:
115
K8S部署EFK收集pod日志,通过邮件报警ERROR日志
分类:
其他好文 时间:
2020-06-01 10:25:37
阅读次数:
135
2013年,Pivotal公司率先提出云原生(Cloud Native)概念。 云原生以容器化、微服务、可持续交付性,帮助企业构建和运行可弹性扩展的应用。由于云原生应用构建简便快捷,部署轻松自如,运行按需伸缩等特点,近年来受到越来越多企业的欢迎。 随着虚拟化技术的成熟和分布式框架的普及,在容器技术、 ...
分类:
其他好文 时间:
2020-05-26 22:18:47
阅读次数:
105
基本流程:1)Logstash-Shipper获取日志信息发送到redis。2)Redis在此处的作用是防止ElasticSearch服务异常导致丢失日志,提供消息队列的作用。[注意,测试时如果写到redis里的日志量比较小,则很快就会被输送到elasticsearch,输送完之后,届时在redis ...
分类:
其他好文 时间:
2020-05-23 18:22:13
阅读次数:
84