文档的核心元数据包括三个:索引、类型、id 1、_index 说明了一个文档存储在哪个索引中,同一个索引下存放的是相似的文档(文档的field多数是相同的)索引名必须是小写的,不能以下划线开头,不能包括逗号。 2、_type 表示文档属于索引中的哪个类型,一个索引下只能有一个type,类型名可以是大 ...
分类:
其他好文 时间:
2020-04-06 17:50:55
阅读次数:
82
ElasticSearch的容错机制处理过程 以9个shard,3个节点为例,如果master节点宕机,此时不是所有的primary shard都是Active status,所以此时的集群状态是red。 容错处理的第一步:重新选举一台服务器作为master 容错处理的第二步:新选举的master会 ...
分类:
其他好文 时间:
2020-04-06 17:33:20
阅读次数:
57
由于elasticsearch7.x取消了type(类型的概念)对应数据库表的概念 kibana的配置以及安装地址 添加一个索引 PUT 索引名 { "settings": { "number_of_shards": 1, "number_of_replicas": 0 } } 创建映射字段 ana ...
分类:
其他好文 时间:
2020-04-06 16:00:27
阅读次数:
721
水平扩容的过程 1、扩容后primary shard和replica shard会自动的负载均衡 2、扩容后每个节点的shard会减少,那么分配给每个shard的cpu,内存、io资源会更多,性能提高 3、扩容的极限,如果有6个shard,扩容的极限就是6个节点,每个节点上一个shard,如果想超出 ...
分类:
其他好文 时间:
2020-04-06 11:47:48
阅读次数:
71
ELK 是什么? 通俗来讲,ELK 是由 Elasticsearch、Logstash、Kibana 三个开源软件组成的一个组合体,这三个软件当中,每个软件用于完成不同的功能,ELK 又称 ELKstack。 官网: https://www.elastic.co/ ELK 主要优点: 1、处理方式灵 ...
分类:
其他好文 时间:
2020-04-06 10:07:43
阅读次数:
79
1、分片和副本机制 1、index包含多个shard 2、每个shard都是一个最小工作单元,承担部分数据;每个shard都是一个lucene示例,有完整的建立索引和处理请求的能力 3、增减节点时,shard会自动在nodes中负载均衡 4、primary shard和replica shard,每 ...
分类:
其他好文 时间:
2020-04-06 10:03:16
阅读次数:
83
两个节点环境下创建索引分析 将3个primary shard分配到一个node上去,另外3个replica shard分配到另外一个节点上 primary shard 和 replica shard保持同步 primary shard 和 replica shard都可以处理客户端的读请求 prim ...
分类:
其他好文 时间:
2020-04-06 09:15:00
阅读次数:
76
使用netty的开源框架 Dubbo:阿里开源的高性能rpc通讯框架 RocketMQ:阿里出品的高性能消息队列 Spark:为大规模数据处理设计的一款计算引擎 Elasticsearch,Cassandra,Flink,Netty-SocketIO,Spring5,Play,Grpc... Net ...
分类:
Web程序 时间:
2020-04-06 00:28:27
阅读次数:
121
1.安装 http://note.youdao.com/noteshare?id=83cbd486d6ec7ae941420047b24e62a8 2.基本概念 http://note.youdao.com/noteshare?id=542df719d3118f2848861d3435967e4e ...
分类:
其他好文 时间:
2020-04-06 00:07:10
阅读次数:
64
ElasticSearch简介 ES是基于Lucene构建的开源、分布式、RESTful接口全文搜索引擎。同时它还是一个分布式文档数据库,其中每个字段均是被索引的数据且可被搜索,便于扩展,能在短时间内搜索和分析大量数据。 Lucene Lucene是一个Java全文搜索引擎;仅是一个框架,提供代码库 ...
分类:
其他好文 时间:
2020-04-05 13:48:42
阅读次数:
325