1、集群状态查看通过这两个界面可以看出1.1如果heap红色,会导致界面查询比较慢.通常是打开了比较多的索引,可以在企业版的日志策略中打开自动关闭索引的功能,通常是打开7天的索引,可以根据具体内存情况多打开几天,比如10天或者15天,不能太多.1.2.如果cpu和load红色,会导致界面查询慢,写入也慢,对采集器的影响尤其明显,采集器的日志中会出现超时或者bulkreject错误.可能原因如下:a
分类:
其他好文 时间:
2020-03-30 17:57:37
阅读次数:
89
介绍最常用的搜索、批量查询和聚合场景的写法,包含分组统计,平均值,排序,区间分组。这是最基本的套路,基本包含了我们常见的需求,熟悉mysql的话,掌握起来非常快,熟悉一下Restful的语法
分类:
其他好文 时间:
2020-03-29 23:54:16
阅读次数:
118
介绍了document的数据格式,并顺带讲解了一下Elasticsearch集群红黄绿三种状态的判定标准,重点是在kibana平台演示的CRUD小案例和bulk批处理示例,最为基础,可以多花一些时间熟悉熟悉
分类:
其他好文 时间:
2020-03-29 10:28:56
阅读次数:
68
最近项目组安排了一个任务,项目中用到了基于 Solr 的全文搜索,但是该 Solr 搜索云项目不稳定,经常查询不出来数据,需要手动全量同步。 而且它还是其他团队在维护,依赖性太强,导致 Solr 服务一出问题,我们的项目也基本瘫痪,因为所有的依赖查询都无结果数据了。 所以考虑开发一个适配层,如果 S ...
分类:
其他好文 时间:
2020-03-29 01:08:03
阅读次数:
138
1. 内存异常circuit_breaking_exception 错误: Elasticsearch exception [type=circuit_breaking_exception, reason=[parent] Data too large, data for [<http_reques ...
分类:
其他好文 时间:
2020-03-28 19:57:45
阅读次数:
519
版本对照 1、在application.yml中添加配置 spring: data: elasticsearch: repositories: enabled: true #多实例集群扩展时需要配置以下两个参数 #cluster-name: datab-search #cluster-nodes: ...
分类:
编程语言 时间:
2020-03-28 19:52:38
阅读次数:
89
参考地址 1、http://www.ruanyifeng.com/blog/2017/08/elasticsearch.html 2、https://www.cnblogs.com/smartloli/p/6978645.html 3、http://www.infoq.com/cn/articles ...
分类:
其他好文 时间:
2020-03-28 10:26:51
阅读次数:
69
概述: Elasticsearch 是一个分布式、可扩展、实时的搜索与数据分析引擎。 它能从项目一开始就赋予你的数据以搜索、分析和探索的能力,这是通常没有预料到的。 它存在还因为原始数据如果只是躺在磁盘里面根本就毫无用处。 Elasticsearch 不仅仅只是全文搜索,我们还将介绍结构化搜索、数据 ...
分类:
其他好文 时间:
2020-03-27 23:30:11
阅读次数:
119
日志系统架构图 软件版本: filebeat 7.5.1 elasticsearch 7.5.1 logstash 7.5.1 kibana 7.5.1 redis 5.0.8 主机: system:Centos 7.7 host IP: 192.168.1.105 安装 elasticsearch ...
分类:
其他好文 时间:
2020-03-27 20:02:51
阅读次数:
93
原理 使用filebeat来上传日志数据,logstash进行日志收集与处理,elasticsearch作为日志存储与搜索引擎,最后使用kibana展现日志的可视化输出。所以不难发现,日志解析主要还是logstash做的事情。 从上图中可以看到,logstash主要包含三大模块: INPUTS: 收 ...
分类:
其他好文 时间:
2020-03-27 11:07:58
阅读次数:
212