上一节已经部署了容器化的 ELK,本节讨论如何将日志导入 ELK 并进行图形化展示。 几乎所有的软件和应用都有自己的日志文件,容器也不例外。前面我们已经知道 Docker 会将容器日志记录到 /var/lib/docker/containers/<contariner ID>/<contariner ...
分类:
其他好文 时间:
2017-11-06 11:27:23
阅读次数:
181
项目中用到了限流,受限于一些实现方式上的东西,手撕了一个简单的服务端限流器。 服务端限流和客户端限流的区别,简单来说就是: 1)服务端限流 对接口请求进行限流,限制的是单位时间内请求的数量,目的是通过有损来换取高可用。 例如我们的场景是,有一个服务接收请求,处理之后,将数据bulk到Elastics ...
分类:
编程语言 时间:
2017-10-26 13:52:34
阅读次数:
227
https://github.com/elastic/elasticsearch-hadoop https://www.elastic.co/guide/en/elasticsearch/hadoop/current/spark.html https://www.elastic.co/guide/e ...
分类:
其他好文 时间:
2017-10-25 16:45:05
阅读次数:
162
logstash: input:https://www.elastic.co/guide/en/logstash/current/input-plugins.html input { file { path =>"/var/log/messages" type => "system" start_p ...
分类:
数据库 时间:
2017-10-11 19:19:09
阅读次数:
222
一)简介elk系统是一套目前较为流行的日志收集分析系统,主要由elasticserch,logstash,kibana三部分组成,其中elasticsearch负责数据的存储,logstash负责日志的收集过滤,kibana负责日志的可视化部分。整个工作流程为logstash收集日志,过滤后输出并保存到elasticsearch中,最..
分类:
其他好文 时间:
2017-09-12 23:18:32
阅读次数:
248
官网: https://www.elastic.co/products/elasticsearch 下载后的解压目录 bin 存放 elasticSearch 运行命令 config 存放配置文件 lib 存放 elasticSearch 运行依赖 jar 包 modules 存放 elasticS ...
分类:
其他好文 时间:
2017-09-08 23:04:13
阅读次数:
289
好问题 1、比如我要索引的条目为“33分钟侦探”,我想在用户输入“3”、“33”、“三三”、“三十三”、“三十三分钟”等的情况下都命中该条目,请问有没有什么好的方式实现? PS:使用的是ansj分词器 https://elasticsearch.cn/question/1812 2、elastics ...
分类:
其他好文 时间:
2017-09-06 12:47:46
阅读次数:
183
在实际搜索中,如果商家信用良好,那有可能搜索的结果前几条都是该商家的,这样会引起其他商家的不满,因此需要干预一下排序,使每页一个商家最多显示两条商品。俗称N抽二,这在淘宝,天猫也是有此规则的。在elasticseasrch中,对外暴露的接口不多,想了几天,最终采用elastics..
分类:
其他好文 时间:
2017-08-12 10:12:21
阅读次数:
106
破解x-pack 1. 编辑文件:LicenseVerifier.javapackage org.elasticsearch.license;import java.nio.*;import java.util.*;import java.security.*;import org.elastics ...
分类:
其他好文 时间:
2017-08-08 17:48:00
阅读次数:
135
nohup ./elasticsearch & 可以后台开启elasticsearch服务 ps-ef列出所有进程 ps-ef | grep elastic...查找elastic。。的进程 kill 进程数字(如:1932,对应java开头的进程) 例子如下: login as: elastics ...
分类:
其他好文 时间:
2017-07-17 11:09:04
阅读次数:
562