由于elasticsearch7.x取消了type（类型的概念）对应数据库表的概念 kibana的配置以及安装地址 添加一个索引 PUT 索引名 { "settings": { "number_of_shards": 1, "number_of_replicas": 0 } } 创建映射字段 ana ...
分类：
其他好文 时间：
2020-04-06 16:00:27
阅读次数：
721
ELK 是什么？ 通俗来讲，ELK 是由 Elasticsearch、Logstash、Kibana 三个开源软件组成的一个组合体，这三个软件当中，每个软件用于完成不同的功能，ELK 又称 ELKstack。 官网： https://www.elastic.co/ ELK 主要优点： 1、处理方式灵 ...
分类：
其他好文 时间：
2020-04-06 10:07:43
阅读次数：
79
**k8s集群日志收集**收集哪些日志K8S系统的组件日志K8SCluster里面部署的应用程序日志日志方案Filebeat+ELKFilebeat(日志采集工具)+Logstach(数据处理引擎)+Elasticserch(数据存储、全文检索、分布式搜索引擎)+Kibana（展示数据、绘图、搜索）容器中的日志怎么收集收集方案：Pod中附加专用日志收集的容器优点：低耦合缺点：每个Pod启动一个日志
分类：
其他好文 时间：
2020-04-05 09:46:15
阅读次数：
75
一、说说前因后果elasticsearch,kafka,zookeeper,kibana,elasticsearch-head,logstash，logstash是需要经常重启的，你上了点过滤规则或者修改点啥的，每次都尼玛杀进程，再nohup，还看不到日志，这太不符合人性了，人性的优点之一就是懒惰。打开web界面，点一下鼠标解决问题岂不是棒棒哒，还能通过web界面看看后台日志，故而用supervi
分类：
其他好文 时间：
2020-04-01 11:08:17
阅读次数：
74
一、日志收集端 1、nginx:nginx-1.16.1.tar.gz 为了kibana收集nginx日志获取字段，先将日志转化为json格式。格式样式如下： log_format access_json '{"@timestamp":"$time_iso8601",' '"host":"$serv ...
分类：
其他好文 时间：
2020-03-31 12:16:39
阅读次数：
95
介绍了document的数据格式，并顺带讲解了一下Elasticsearch集群红黄绿三种状态的判定标准，重点是在kibana平台演示的CRUD小案例和bulk批处理示例，最为基础，可以多花一些时间熟悉熟悉
分类：
其他好文 时间：
2020-03-29 10:28:56
阅读次数：
68
日志系统架构图 软件版本： filebeat 7.5.1 elasticsearch 7.5.1 logstash 7.5.1 kibana 7.5.1 redis 5.0.8 主机： system：Centos 7.7 host IP: 192.168.1.105 安装 elasticsearch ...
分类：
其他好文 时间：
2020-03-27 20:02:51
阅读次数：
93
原理 使用filebeat来上传日志数据，logstash进行日志收集与处理，elasticsearch作为日志存储与搜索引擎，最后使用kibana展现日志的可视化输出。所以不难发现，日志解析主要还是logstash做的事情。 从上图中可以看到，logstash主要包含三大模块： INPUTS: 收 ...
分类：
其他好文 时间：
2020-03-27 11:07:58
阅读次数：
212
elasticsearch 安装 １．国内下载地址： https://mirrors.huaweicloud.com/elasticsearch/ ２．安装步骤： cd elasticsearch 5.4.1 / bin ./elasticsearch kibana 安装 １．下载地址： https ...
分类：
其他好文 时间：
2020-03-26 15:11:01
阅读次数：
91
某天发现项目的kibana网页莫名其妙访问不了了 进入linux系统发现kibana进程没了，于是开始重启，发现重启的极其慢 进入控制台，发现索引报了一个错 Index lifecycle error cluster_block_exception: index [java-error-log-pe ...
分类：
其他好文 时间：
2020-03-23 18:33:57
阅读次数：
151
