redis 数据库主从不一致问题解决方案 在聊数据库与缓存一致性问题之前,先聊聊数据库主库与从库的一致性问题。 问:常见的数据库集群架构如何? 答:一主多从,主从同步,读写分离。 如上图: (1)一个主库提供写服务 (2)多个从库提供读服务,可以增加从库提升读性能 (3)主从之间同步数据 画外音:任 ...
分类:
数据库 时间:
2020-05-19 22:29:34
阅读次数:
102
一、注意点 1、接上一篇博客,在搭建好主从的基础上,搭建MySQL的双主架构,也就是让从库的数据更改也同步到主库,这种情况2台数据库的角色就互换了,互为主备。 二、搭建步骤 1、在从节点上创建用于同步数据的用户 命令:grant replication slave on *.* to 'repl_u ...
分类:
数据库 时间:
2020-05-16 17:17:08
阅读次数:
88
简介 DNS的出现及演变 网络出现的早期是使用 IP 地址进行通信. 那时就几台主机通信. 但是随着接入网络主机的增多.这种数字表示的地址非常不便于记忆, UNIX 上就出现了建立一个叫做 hosts 的文件(Linux 和 Windows 也继承保留了这个文件). 这个文件中记录着主机名称和 IP ...
分类:
其他好文 时间:
2020-05-15 15:28:11
阅读次数:
79
kettle同步数据,从mysql到sqlServer中,MySQL中的时间字段为timestamp类型,sqlserver中的数据列数据类型为timestamp类型,但是二者同步的时候会发生错误,报错:然后试图将sqlServer中的timestamp字段类型修改为datatime类型,执行语句:... ...
分类:
数据库 时间:
2020-05-12 17:23:34
阅读次数:
251
MongoDB向ES同步数据延迟越来越大,有的已经超过10个小时,造成客户新加入的用户无法被搜索出来。由于在系统中ES类似于数仓,很多统计和第三方接系统都需要从ES获取数据,所以也影响了一些其他依赖ES数据的功能和业务。 ...
分类:
其他好文 时间:
2020-05-11 09:13:04
阅读次数:
67
## 概述 MySQL 默认是异步复制,半复制是为了数据一致性,防止异步同步数据过程中,事务丢失。同步复制的话可以保证数据的一致性,数据不丢失可以回滚,但是响应慢,master 必须等待 slave 返回的ack响应才算完整地完成事务,而异步复制则有可能出现数据不一致的问题,半复制处于异步复制和同步... ...
分类:
数据库 时间:
2020-05-07 17:00:04
阅读次数:
95
本文源码:GitHub·点这里||GitEE·点这里一、DataX工具简介1、设计理念DataX是一个异构数据源离线同步工具,致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能。解决异构数据源同步问题,DataX将复杂的网状的同步链路变成了星型数据链路,DataX作为中间传输载体负责连接各种数据源。当
分类:
其他好文 时间:
2020-05-06 10:30:40
阅读次数:
73
在Django项目中,我们需要用到数据库时,通常有两种方式实现创建和同步数据库 1、直接在models.py文件中写方法,然后再同步到数据库中 class UserName(models.Model): id = models.IntegerField() name = models.CharFie ...
分类:
数据库 时间:
2020-05-04 13:51:12
阅读次数:
68
1.为什么需要重建索引 举个例子,如果一个字段是text类型,如果想修改为Long类型,是不能直接修改的。 在重建的过程中,需要有别名的参与。 2.操作步骤 对当前的索引新建一个别名 新建一个新的索引,同步结构 同步数据 给新的索引见一个别名 删除老的索引的别名 删除老的索引 二:操作步骤详解 1. ...
分类:
其他好文 时间:
2020-05-02 09:35:18
阅读次数:
65