elasticsearch权威指南:https://es.xiaoleilu.com/ spring_data_elasticsearch:https://wangkang007.gitbooks.io/java/spring_data_elasticsearchjie_shao.html ...
分类:
其他好文 时间:
2020-05-26 18:28:51
阅读次数:
54
前言 收集大量的日志信息之后,把这些日志存放在哪里?才能对其日志内容进行搜素呢?MySQL? 如果MySQL里存储了1000W条这样的数据,每条记录的details字段有128个字。 用户想要查询details字段包含“ajax”这个关键词的记录。 MySQL执行 select * from log ...
分类:
其他好文 时间:
2020-05-26 12:20:08
阅读次数:
61
安装 下载解压 elasticsearch-7.7.0-linux-x86_64.tar.gz tar -zxvf elasticsearch-7.7.0-linux-x86_64.tar.gz -C /mnt/hgfs/shareLinux/ z:通过gzip指令处理备份文件。 x:从备份文件中还 ...
分类:
其他好文 时间:
2020-05-26 01:20:21
阅读次数:
356
ELK·Elastic Stack Elastic Stack就一套日志分析系统,前身叫ELK。 E:Elasticsearch L:Logstash,日志收集系统 K:Kibana,数据可视化平台 现加入Beats,是一个数据采集器,可以直接上报给elasticsearch,也可以通过logsta ...
分类:
其他好文 时间:
2020-05-26 00:52:11
阅读次数:
309
SpringBoot连接ElasticSearch有以下种方式, TransportClient,9300端口,在 7.x 中已经被弃用,据说在8.x 中将完全删除 restClient,9200端口, high level client,新推出的连接方式,基于restClient。使用的版本需要保 ...
分类:
编程语言 时间:
2020-05-25 23:43:56
阅读次数:
160
概要上一篇中多次提到了按相关性评分,本篇我们就来简单了解一下相关性评分的算法,以及正排索引排序的优势。评分算法Elasticsearch进行全文搜索时,BooleanModel是匹配的基础,先用booleanmodel将匹配的文档挑选出来,然后再运用评分函数计算相关度,参与的函数如我们提到的TF/IDF、LengthNorm等,再加上一些控制权重的参数设置,得到最后的评分。BooleanModel
分类:
编程语言 时间:
2020-05-25 13:56:39
阅读次数:
77
1.简介 packbeat是一个开源的实时网络抓包与分析框架,内置了很多常见的协议捕获及解析,如HTTP、MySQL、Redis等。在实际使用中,通常和Elasticsearch以及kibana联合使用,用于数据搜索和分析以及数据展示。 目前Packebeat支持的协议如下: ICMP (v4 an ...
分类:
其他好文 时间:
2020-05-23 18:29:30
阅读次数:
78
基本流程:1)Logstash-Shipper获取日志信息发送到redis。2)Redis在此处的作用是防止ElasticSearch服务异常导致丢失日志,提供消息队列的作用。[注意,测试时如果写到redis里的日志量比较小,则很快就会被输送到elasticsearch,输送完之后,届时在redis ...
分类:
其他好文 时间:
2020-05-23 18:22:13
阅读次数:
84
1.安装Kibana 服务器角色 主机名 ip 服务 elk1 192.168.1.223 jdk1.8,es7.2,logstash, elk2 192.168.1.224 jdk1.8,es7.2,elasticsearch-head, kibana,cerebro elk3 192.168.1 ...
分类:
其他好文 时间:
2020-05-23 16:16:53
阅读次数:
54