一、介绍 1、基本介绍 MongoDB部署架构分为单机、复制集群、分片集群。单机适合学习用，分片集群比较复杂且运维难度高。 分片集群是把大型数据集进行拆分，分片到多个MongoDB节点上，这些节点组成了分片集群。分片结构如下： 2、词汇表 Shard：分片，存储集群中的一部分数据。可以是单个mong ...
分类：
数据库 时间：
2021-05-25 17:49:26
阅读次数：
0
超过最大分片引起的，在es机器上执行：curl -XPUT -H "Content-Type:application/json" -d '{"persistent":{"cluster":{"max_shards_per_node":10000}}}' 'http://es-host:9200/_c ...
分类：
其他好文 时间：
2021-05-25 17:41:51
阅读次数：
0
典型问题之一：Elasticsearch集群的磁盘被打爆 造成磁盘被打爆有以下几种原因： 索引泛滥，索引接入无流程管控； 索引无生命周期管理； 索引分片数量不合理，单分片过大； 日志类索引未按天等细粒度划分，单索引过大； 多集群复用同一服务器节点； 磁盘容量大小不一。 这些问题比较基础，其实也反映出 ...
分类：
其他好文 时间：
2021-05-24 12:58:48
阅读次数：
0
云原生数据库vitess Vitess 是一个通过分片实现MySQL水平自动扩展的集群数据库系统。 The Vitess Docs | Architecture ...
分类：
数据库 时间：
2021-05-24 10:01:34
阅读次数：
0
前言 Elastic自身设计了集群分片的负载平衡机制，当有新数据节点加入集群或者离开集群，集群会自动平衡分片的负载分布。 需求背景 公司原有大数据平台基于公有云构建，由于种种原因，现在需要迁移到自建机房，Elasticsearch集群承担了大数据平台主要的对外查询需求，也有部分实时计算需求基于Ela ...
分类：
其他好文 时间：
2021-05-24 03:46:38
阅读次数：
0
JSX 表现上是JS的语法扩展。将标签语法和JS语法合在一起。实际上是组件化的开发模式让UI和逻辑实现分离。 React Fiber React核心算法的重新实现 React同步更新过程的局限 React加载更新组件后会做很多事，调用生命周期函数、对比Virtural DOM，更新DOM树。 由于R ...
分类：
其他好文 时间：
2021-05-24 00:26:26
阅读次数：
0
ShardingJDBC的核心流程主要分成六个步骤，分别是：SQL解析->SQL优化->SQL路由->SQL改写->SQL执行->结果归并，流程图如下: sharding官网 https://shardingsphere.apache.org/document/legacy/3.x/document ...
分类：
数据库 时间：
2021-04-30 12:09:19
阅读次数：
0
之前研究过基于主从+分片实现的集群，现在研究下基于哨兵模式的集群模式。 1. 下载redis 版本： 3.2.100 2. 开始搭建集群 (1) 复制集三个redis 目录，分别命名为 redis-63791、 redis-63792、 redis-63793 63791是master节点，剩下两个 ...
关于mongodb的高级操作，包括聚合、主从复制、分片、备份与恢复、MR。 一、聚合 aggregate聚合(aggregate)主要用于计算数据，类似sql中的sum()、avg() 语法： db.集合名称.aggregate([{管道:{表达式}}]) 管道：管道在Unix和Linux中一般用于 ...
分类：
数据库 时间：
2021-04-14 12:40:50
阅读次数：
0
