1.为了将数据添加到ES，我们需要索引(index),索引是一个存储关联数据的地方。实际上，索引只是一个用来指定一个或多个分片的"逻辑命名空间" 2.一个分片（shard）是一个最小级别"工作单元"，它只是保存了索引中的所有数据的一部分，每个分片就是一个Lucene实例，并且它本身就是一个完整的搜索 ...
分类：
其他好文 时间：
2018-07-28 11:57:08
阅读次数：
5047
概述MongoDB分片是使用多个服务器存储数据的方法，以支持巨大的数据存储和对数据进行操作。分片技术可以满足MongoDB数据量大量增长的需求，当一台MongoDB服务器不足以存储海量数据或不足以提供可接受的读写吞吐量时，我们就可以在多台服务器上分割数据，使得数据库系统能存储和处理更多的数据。MongoDB分片群集的组成Shard:分片服务器，用于存储实际的数据块，实际生产环境中一个shardse
分类：
数据库 时间：
2018-07-24 10:18:55
阅读次数：
242
1、shard&replica机制再次梳理2、图解单node环境下创建index是什么样子的 1、shard&replica机制再次梳理 （1）index包含多个shard（2）每个shard都是一个最小工作单元，承载部分数据，lucene实例，完整的建立索引和处理请求的能力（3）增减节点时，sha ...
分类：
其他好文 时间：
2018-07-20 00:22:03
阅读次数：
154
简介：大数据量和吞吐量的数据库会对单机的性能造成较大压力，大量的数据查询会将单机的CPU耗尽，大的数据量对单机的存储压力较大，最终会耗尽系统的内存，将压力转移到磁盘IO上。优点：1.使用分片减少了每个分片需要处理的请求数。2.使用分片减少了每个分片存储的数据。mongodb分片群集的组成：shard(分片服务器)，configserver(配置服务器)，route(路由服务器）分片服务器：存储数据
分类：
数据库 时间：
2018-07-18 10:53:23
阅读次数：
198
mongodb集群 组件： mongos：请求分发 config server 配置服务器 shard 分片数据服务器 三台机器 192.168.174.128 192.168.174.129 192.168.174.130 服务器规划 端口分配： mongos：20000 config：21000 ...
分类：
数据库 时间：
2018-07-13 17:38:26
阅读次数：
259
1、查看集群设置 2、设置allocation 3、删除索引 4、查看未分配分片（unassigned shard） 5、查看索引 6、查看模板（template） 7、删除模板 8、加载模板 9、查看mapping 10、查看集群的状态 11、计算集群中文档数量 ...
第三十一讲！ 分布式文档系统 写一致性原理以及相关参数 课程大纲 （1）consistency，one（primary shard），all（all shard），quorum（default） 我们在发送任何一个增删改操作的时候，比如说put /index/type/id，都可以带上一个consi ...
分类：
其他好文 时间：
2018-07-05 14:59:00
阅读次数：
202
第十一讲： 2个node环境下replica shard 是如何分配的 1）replica shard分配：3个primary shard，3个replica shard，1 node（2）primary > replica同步（3）读请求：primary/replica 当primary shar ...
分类：
其他好文 时间：
2018-07-04 20:07:44
阅读次数：
191
只当个搬运工吧 搭建篇：https://www.cnblogs.com/mafly/p/redis_cluster.html 测试能用 常见问题： 1 redis操作key时出现以下错误 (error) MOVED 5798 127.0.0.1:7001 https://www.fashici.co ...
分类：
其他好文 时间：
2018-07-01 17:50:56
阅读次数：
1123
一、搜索效率优化 批量提交 当有大量数据提交的时候，建议采用批量提交。 比如在做 ELK 过程中 ，Logstash indexer 提交数据到 Elasticsearch 中 ，batch size 就可以作为一个优化功能点。但是优化 size 大小需要根据文档大小和服务器性能而定。 像 Logs ...
分类：
其他好文 时间：
2018-06-26 20:50:46
阅读次数：
202
