策略模式 ThreadPoolExecutor的RejectedExecutionHandler，实现不同的拒绝策略。 装饰者模式 BufferedInputStream对InputStream扩展buffer功能。 工厂模式 Executors作为工厂，提供各种ExecutorService。 命 ...
分类：
其他好文 时间：
2020-04-19 15:02:27
阅读次数：
67
当业务量上升后，由于mysql对全文检索或模糊查询支持的能力不强，在系统中查询的地方，往往会出现慢sql等，拖累系统其他模块，造成性能低下。随着ES使用普及率的升高，ES是mysql的一个有效补充。我们可以将数据发送到搜索引擎（如ES）上，由搜索引擎来提供专业的服务。接下来，就结合工作中实际用到的场 ...
分类：
数据库 时间：
2020-04-16 19:38:19
阅读次数：
243
1. es基础 1.1 es定义 Elasticsearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口 es相当于数据库，没有数据格式约束。 1.2 ES数据架构的主要概念（与关系数据库Mysql对比） （1）关系型数据库中的数据库 ...
分类：
其他好文 时间：
2020-04-15 23:03:14
阅读次数：
165
日志是每个系统最为头疼的地方，杂乱，还多，没有还不行，想管理好的话，得经得起考验，要解决的问题总结如下： （1）高并发 （2）高吞吐量 （3）支持分布式集群 （4）检索要快 简介： 1.Zoomkeeper Kafka的通道 2. Kafka Kafka主要是解决大量日志的处理的分布式发布订阅消息系 ...
分类：
Web程序 时间：
2020-04-08 12:05:55
阅读次数：
124
学习的原因： 17年的时候有学习使用过lucene和solr，但是后来也遗忘了，最近公司有个项目需要使用到全文检索，正好也顺便跟着学习一下，使用的版本是Solr7.4的， solr解压之后的目录结构: 各文件夹里面的内容： solr从5版本之后不再需要tomcat，使用内置的jetty启动。 下面开 ...
分类：
其他好文 时间：
2020-04-08 10:14:13
阅读次数：
80
简述 前面从新回顾学习了Solr，正好也借此机会顺便学习一下Lucene。 一、什么是Lucene? 全文检索的一个实现方式，也是非结构化数据查询的方法。应用场景：在数据量大，数据结构不固定的时候，采用Lucene，比如百度、Google等搜索引擎，网站的站内搜索，电商平台的商品检索等。 二、Luc ...
分类：
Web程序 时间：
2020-04-08 10:11:04
阅读次数：
88
一、Elasticsearch介绍 之前有学习使用过Solr。Elasticsearch也是基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是当前流行的 ...
分类：
其他好文 时间：
2020-04-08 10:03:52
阅读次数：
306
1、分片和副本机制 1、index包含多个shard 2、每个shard都是一个最小工作单元，承担部分数据；每个shard都是一个lucene示例，有完整的建立索引和处理请求的能力 3、增减节点时，shard会自动在nodes中负载均衡 4、primary shard和replica shard，每 ...
分类：
其他好文 时间：
2020-04-06 10:03:16
阅读次数：
83
ElasticSearch简介 ES是基于Lucene构建的开源、分布式、RESTful接口全文搜索引擎。同时它还是一个分布式文档数据库，其中每个字段均是被索引的数据且可被搜索，便于扩展，能在短时间内搜索和分析大量数据。 Lucene Lucene是一个Java全文搜索引擎；仅是一个框架，提供代码库 ...
分类：
其他好文 时间：
2020-04-05 13:48:42
阅读次数：
325
**k8s集群日志收集**收集哪些日志K8S系统的组件日志K8SCluster里面部署的应用程序日志日志方案Filebeat+ELKFilebeat(日志采集工具)+Logstach(数据处理引擎)+Elasticserch(数据存储、全文检索、分布式搜索引擎)+Kibana（展示数据、绘图、搜索）容器中的日志怎么收集收集方案：Pod中附加专用日志收集的容器优点：低耦合缺点：每个Pod启动一个日志
分类：
其他好文 时间：
2020-04-05 09:46:15
阅读次数：
75
