分片 每个分区都是自己的小型数据库，尽管数据库可能支持同时进行多个分区的操作。分区主要是为了可扩展性。不同的分区可以放在不共享集群中的不同节点上。因此，大数据集可以分布在多个磁盘上，并且查询负载可以分布在多个处理器上。 分区目标是将数据和查询负载均匀分布在各个节点上。如果分区是不公平的，一些分区比其 ...
分类：
其他好文 时间：
2020-02-15 23:22:41
阅读次数：
65
mycat的配置 cacheservice.properties:路由缓存相关配置文件 index_to_charset.properties:字符集映射关系 rule.xml:分片规则 schema.xml:逻辑库定义 sequence_conf:sequence配置信息(一般用基于db,time ...
分类：
数据库 时间：
2020-02-15 15:50:08
阅读次数：
96
复制 复制意味着在通过网络连接的多台机器上保留相同数据的副本。复制的困难之处在于处理复制数据的变更。我们将 讨论三种流行的变更复制算法：单领导者，多领导者和无领导者。几乎所有分布式数据库都使用这三种方法之一。 主从结构 存储数据库副本的每个节点称为副本。当存在多个副本时，会不可避免的出现一个问题：如 ...
分类：
其他好文 时间：
2020-02-14 00:56:48
阅读次数：
64
1.基本信息,mysql5.7.22节点:datanode1,datanode2,datanode3mycat1.6.5.2.故障现象:导入千万级测试数据的时候报2013,2006,或者3009连接中断ERROR2013(HY000)atline176infile:‘/soft/TEST_1KW.sql‘:LostconnectiontoMySQLserverduringquery
分类：
其他好文 时间：
2020-02-11 17:30:17
阅读次数：
103
数据库的写入请求量大造成的性能和可用性方面的问题，要解决这些问题，你所采取的措施就是对数据进行分片。这样可以很好地分摊数据库的读写压力，也可以突破单机的存储瓶颈，而常见的一种方式是对数据库做“分库分表”。 数据库分库分表的方式有两种：一种是垂直拆分，另一种是水平拆分。这两种方式，在我看来，掌握拆分方 ...
分类：
数据库 时间：
2020-02-09 18:23:26
阅读次数：
83
Q：为何要采用异步编程 A：异步编程首先不会节约线程，因为异步操作都会重新开一个线程。异步编程是提高了CPU的使用率，采用同步编程的方式，整个服务器的所有线程大部分都没有在工作，而是在等待。因为线程同步操作 要等整个事件处理完成才能提交，所以CPU的利用率很低；当采用异步编程，线程不需要等待，减少时 ...
分类：
编程语言 时间：
2020-02-09 18:09:31
阅读次数：
53
在项目开发中redis的使用也比较频繁，本文介绍了Go语言如何操作Redis。 Redis介绍 Redis是一个开源的内存数据库，Redis提供了多种不同类型的数据结构，很多业务场景下的问题都可以很自然地映射到这些数据结构上。除此之外，通过复制、持久化和客户端分片等特性，我们可以很方便地将Redis ...
分类：
编程语言 时间：
2020-02-09 16:46:22
阅读次数：
78
开始你的api：NetApiStarter 此篇是写给新手的Demo，用于参考和借鉴，用于发散思路。老鸟可以忽略了。 自己经常有这种情况，遇到一个新东西或难题，在了解和解决之前总是说“等搞定了一定要写篇文章记录下来”，但是当掌握了之后，就感觉好简单呀不值得写下来了。其实这篇也一样，决定写下来是想在春 ...
版本：5.7.281.搭建mycat 分片服务器 数据库主机 192.168.4.54 使用db1库存储数据数据库主机 192.168.4.55 使用db2库存储数据主机 192.168.4.56 运行mycat服务，逻辑库名称为test，连接用户名为admin，密码123456主机 192.168 ...
分类：
其他好文 时间：
2020-02-04 13:57:01
阅读次数：
63
1.1.1 输入分片和记录 （1）输入分片InputSplit接口 输入分片一般是文件，也可以数据库中的若干行。记录对应一行数据。输入分片在java表示为InputSplit接口，getlength函数返回大小，用于分片排序，大的先处理。Getlocation函数返回分片位置，让map任务尽量本地化 ...
分类：
其他好文 时间：
2020-02-03 11:30:47
阅读次数：
69
