实验环境 主机 IP 虚拟通道 centos1 192.168.3.10 vmnet8 centos2 192.168.3.11 vmnet8 centos3 192.168.3.12 vmnet8 从图中可以看到有四个组件：mongos、config server、shard、replica se ...
分类：
数据库 时间：
2017-11-16 14:14:37
阅读次数：
196
Elasticsearch日志分析系统 作者：尹正杰 版权声明：原创作品，谢绝转载！否则将追究法律责任。 一.什么是Elasticsearch 一个采用Restful API标准的高扩展性的和高可用性的实时数据分析的全文搜索工具。高扩展性体现在Elasticsearch添加节点非常简单，基本新的节点 ...
分类：
其他好文 时间：
2017-10-28 01:07:15
阅读次数：
492
如果返回的结果集过大，那聚合所花的时间会较多，阿里搜索中是有海选的概念，所谓的海选就是在总多的返回集中，抽取其中一些返回值，抽取的规则由业务制定。其实在elasticsearch也是可以有的，实现也比较简单。"sampler":{"shard_size":300, "field":"A","max_docs_per_value":..
分类：
其他好文 时间：
2017-10-24 16:15:08
阅读次数：
119
在说HBase之前，我想再唠叨几句。做互联网应用的哥们儿应该都清楚，互联网应用这东西，你没办法预测你的系统什么时候会被多少人访问，你面临的用户到底有多少，说不定今天你的用户还少，明天系统用户就变多了，结果您的系统应付不过来了了，不干了，这岂不是咱哥几个的悲哀，说时髦点就叫“杯具啊”。其实说白了，这些 ...
分类：
数据库 时间：
2017-10-20 16:52:34
阅读次数：
206
Elasticsearch是一个分布式搜索服务，提供Restful API，底层基于Lucene，采用多shard的方式保证数据安全，并且提供自动resharding的功能，github等大型的站点也都采用Elasticsearch作为其搜索服务。废话在此就不多赘述了，下面记录下CentOS7下El ...
分类：
其他好文 时间：
2017-10-19 16:59:05
阅读次数：
184
思路： 一个小集群 1 各个节点之间以多播方式通信，且通过TCP的9300端口通信，基于节点名称通信。集群中必须定义一个主节点，用于管理集群。主节点会决定哪个shard是primary，且查找replica shard。如果集群中添加一个新的节点，那么shard均衡将会被ElasticSearch集 ...
分类：
其他好文 时间：
2017-10-12 17:49:35
阅读次数：
165
本文讲述，如何理解Elasticsearch的分片、副本和路由策略。 1、预备知识 1）分片（shard） Elasticsearch集群允许系统存储的数据量超过单机容量，实现这一目标引入分片策略shard。在一个索引index中，数据（document）被分片处理（sharding）到多个分片上。 ...
分类：
其他好文 时间：
2017-10-03 13:53:17
阅读次数：
501
在MongoDB（版本 3.2.9）中，数据的分发是指将collection的数据拆分成块（chunk），分布到不同的分片（shard）上，数据分发主要有2种方式：基于数据块（chunk）数量的均衡分发和基于片键范围（range）的定向分发。MongoDB内置均衡器（balancer），用于拆分块和 ...
分类：
数据库 时间：
2017-09-19 15:26:45
阅读次数：
201
在MongoDB（版本 3.2.9）中，分片集群（sharded cluster）是一种水平扩展数据库系统性能的方法，能够将数据集分布式存储在不同的分片（shard）上，每个分片只保存数据集的一部分，MongoDB保证各个分片之间不会有重复的数据，所有分片保存的数据之和就是完整的数据集。分片集群将数 ...
分类：
数据库 时间：
2017-09-19 15:23:18
阅读次数：
260
首先介绍一下系统架构: * 这个图中代表的是三个solr实例,每个实例包括两个core,组成一个solrcloud * 索引集合包括两个 shard(shard1和shard2),shard1和shard2分别由三个core组成,其中一个L eader两个Replication,Leader是由zo ...
分类：
系统相关 时间：
2017-09-18 19:41:46
阅读次数：
261
