lucene 1.lucene是一个开放源代码的全文检索引擎工具包，它不是一个完整的全部检索引擎，而是一个全文检索引擎的架构，提供了完整的查询引擎和索引引擎，部分文本分析引擎。 2.非结构化数据查询方法：（1）.顺序扫描法 例子 windows的搜索 （2）.全文检索 部分信息建立索引 好比我们的字 ...
分类：
Web程序 时间：
2020-05-02 11:47:41
阅读次数：
80
ELK 官网： https://www.elastic.co/cn/what-is/elk-stack ElasticSearch ElasticSearch 是一个高可用开源全文检索和分析组件。提供存储服务，搜索服务，大数据准实时分析等。一般用于提供一些提供复杂搜索的应用 基本概念： Index ...
分类：
其他好文 时间：
2020-04-29 23:46:04
阅读次数：
71
当业务量上升后，由于mysql对全文检索或模糊查询支持的能力不强，在系统中查询的地方，往往会出现慢sql等，拖累系统其他模块，造成性能低下。随着ES使用普及率的升高，ES是mysql的一个有效补充。我们可以将数据发送到搜索引擎（如ES）上，由搜索引擎来提供专业的服务。接下来，就结合工作中实际用到的场 ...
分类：
数据库 时间：
2020-04-16 19:38:19
阅读次数：
243
日志是每个系统最为头疼的地方，杂乱，还多，没有还不行，想管理好的话，得经得起考验，要解决的问题总结如下： （1）高并发 （2）高吞吐量 （3）支持分布式集群 （4）检索要快 简介： 1.Zoomkeeper Kafka的通道 2. Kafka Kafka主要是解决大量日志的处理的分布式发布订阅消息系 ...
分类：
Web程序 时间：
2020-04-08 12:05:55
阅读次数：
124
学习的原因： 17年的时候有学习使用过lucene和solr，但是后来也遗忘了，最近公司有个项目需要使用到全文检索，正好也顺便跟着学习一下，使用的版本是Solr7.4的， solr解压之后的目录结构: 各文件夹里面的内容： solr从5版本之后不再需要tomcat，使用内置的jetty启动。 下面开 ...
分类：
其他好文 时间：
2020-04-08 10:14:13
阅读次数：
80
简述 前面从新回顾学习了Solr，正好也借此机会顺便学习一下Lucene。 一、什么是Lucene? 全文检索的一个实现方式，也是非结构化数据查询的方法。应用场景：在数据量大，数据结构不固定的时候，采用Lucene，比如百度、Google等搜索引擎，网站的站内搜索，电商平台的商品检索等。 二、Luc ...
分类：
Web程序 时间：
2020-04-08 10:11:04
阅读次数：
88
**k8s集群日志收集**收集哪些日志K8S系统的组件日志K8SCluster里面部署的应用程序日志日志方案Filebeat+ELKFilebeat(日志采集工具)+Logstach(数据处理引擎)+Elasticserch(数据存储、全文检索、分布式搜索引擎)+Kibana（展示数据、绘图、搜索）容器中的日志怎么收集收集方案：Pod中附加专用日志收集的容器优点：低耦合缺点：每个Pod启动一个日志
分类：
其他好文 时间：
2020-04-05 09:46:15
阅读次数：
75
导读：首先你将通过这篇文章了解到ApacheDruid底层的数据存储方式。其次将知道为什么ApacheDruid兼具数据仓库，全文检索和时间序列的特点。最后将学习到一种优雅的底层数据文件结构。
分类：
Web程序 时间：
2020-03-30 16:41:52
阅读次数：
106
什么是全文检索？ 计算机索引程序通过扫描文章中的每一个词，对每一个词建立一个索引，指明该词在文章中出现的次数和位置，当用户查询时，检索程序就根据事先建立的索引进行查找，并将查找的结果反馈给用户的检索方式什么是Lucene？ Lucene 是一套用于全文检索和搜寻的开源程式库，由Apache软件基金会 ...
分类：
Web程序 时间：
2020-03-22 14:03:54
阅读次数：
73
1、haystack简介Haystack是django的开源全文搜索框架(全文检索不同于特定字段的模糊查询，使用全文检索的效率更高 )，该框架支持Solr,Elasticsearch,Whoosh, Xapian，搜索引擎它是一个可插拔的后端（很像Django的数据库层），所以几乎你所有写的代码都可... ...
分类：
其他好文 时间：
2020-03-21 14:38:50
阅读次数：
57
