本文已收录GitHub，更有互联网大厂面试真题，面试攻略，高效学习资料等众所周知，消息队列在收发两端，主要是依靠业务代码，配合请求确认的机制，来保证消息不会丢失的。而在服务端，一般采用持久化和复制的方式来保证不丢消息。把消息复制到多个节点上，不仅可以解决丢消息的问题，还可以保证消息服务的高可用。即使某一个节点宕机了，还可以继续使用其他节点来收发消息。所以大部分生产系统，都会把消息队列配置成集群模式
分类：
其他好文 时间：
2020-07-01 09:56:57
阅读次数：
58
1. 集群管理，元数据同步； 2. 大量的心跳广播信息可能导致心跳风暴问题，可考虑链式资源进行心跳； 3. 存储资源的均衡性问题； 4. 节点异常时的容错处理； 5. 单点故障和性能瓶颈； 6. 网络延时可能导致局部的大量优化化为乌有； 7.资源的故障域隔离，避免节点或者机架故障，导致数据丢失； 8 ...
分类：
其他好文 时间：
2020-07-01 09:27:54
阅读次数：
54
前一阵领导安排了一个任务:定时将集团数据库某表的数据同步至我们公司服务器的数据库,感觉比写增删改查SQL有趣,特意记录下来,希望能帮到有类似需求的小伙伴,如有错误也希望各位不吝指教 环境描述: 集团数据库:Oracle 11g 部门数据库:Oracle 11g 使用的软件:PLSQL Develop ...
分类：
数据库 时间：
2020-07-01 09:18:56
阅读次数：
71
1、概要 ZooKeeper是用于分布式应用程序的协调服务。它公开了一组简单的API，分布式应用程序可以基于这些API用于同步，节点状态、配置等信息、服务注册等信息。其由JAVA编写，支持JAVA 和C两种语言的客户端。 zookeeper 中数据基本单元叫节点，节点之下可包含子节点，最后以树级方式 ...
分类：
其他好文 时间：
2020-06-30 23:02:04
阅读次数：
195
背景 公司想要将业务系统使用的数据库由 SQL SERVER 切换到 ORACLE，因此需要将原 SQL SERVER 库的数据同步到 ORACLE 库中。 因为涉及的数据表有几百张，数据约百G的级别，一张表开发一个Kettle 太过于繁琐了，因此考虑通过配置完成数据同步。 方案： SQLSERVE ...
分类：
其他好文 时间：
2020-06-30 20:13:31
阅读次数：
128
#!/bin/bashsrc=/test/dest=testrsync_secret_file=/etc/rsync_pwdfiledest_ip=192.168.37.133user=test/usr/local/bin/inotifywait -mrq --format '%Xe %w %f' ...
分类：
其他好文 时间：
2020-06-30 18:56:32
阅读次数：
44
Redis的数据都是存储在内存中,为了数据的永久保存,需要把数据同步到硬盘上,这个过程就叫做持久化. Redis的持久化存在有两种方式: rdb方式,aof方式,这两种方式可以单独使用,也可以综合使用. rdb持久化方式: 是在指定的时间间隔写入硬盘 aof持久化方式:是以日志,记录每一个操作,服务 ...
分类：
数据库 时间：
2020-06-29 20:13:43
阅读次数：
68
背景 项目实际生产环境中，经常因为redis缓存数据和数据库数据不一致导致各种问题，归根揭底是因为从db同步数据到redis中这个过程不稳定，容易漏数据。所以每次出现问题就需要根据问题来确认是哪个缓存key数据不一致导致的问题，然后通过页面单条刷新功能进行redis数据同步。 ps：这次重构比较坑， ...
分类：
其他好文 时间：
2020-06-26 18:41:46
阅读次数：
66
计算机科学中, 同步（synchronization）是指两个不同但有联系的概念：进程同步与数据同步。进程同步指多个进程在特定点会合（join up）或者握手使得达成协议或者使得操作序列有序。数据同步指一个数据集的多份拷贝一致以维护完整性。常用进程同步原语实现数据同步。 死锁：某一个进程占有共享资源 ...
分类：
其他好文 时间：
2020-06-25 09:40:03
阅读次数：
83
