其实还是得结合业务来思考，我这里给几个思路： 比如你拿个数据要写库，你先根据主键查一下，如果这数据都有了，你就别插入了，update 一下好吧。比如你是写 Redis，那没问题了，反正每次都是 set，天然幂等性。比如你不是上面两个场景，那做的稍微复杂一点，你需要让生产者发送每条数据的时候，里面加一 ...
分类：
数据库 时间：
2020-02-26 01:51:51
阅读次数：
110
还没弄懂分布式场景下数据一致性问题？一文教你轻松解决！
分类：
其他好文 时间：
2020-02-20 10:02:33
阅读次数：
104
参考文档: http://mysql.taobao.org/monthly/2017/04/01/ 阿里内核月报半同步复制的数据一致性 https://www.cnblogs.com/ivictor/p/5735580.html 半同步复制搭建 https://www.cnblogs.com/f-c ...
分类：
数据库 时间：
2020-02-19 17:20:07
阅读次数：
94
CAP定理： 在一个分布式系统中，Consistency（数据一致性）、 Availability（服务可用性）、Partition tolerance（分区容错性），三者不可兼得。 一致性(Consistency) 在分布式系统中的所有数据备份（副本），在同一时刻数据的值是否一致。（等同于所有节点 ...
分类：
其他好文 时间：
2020-02-13 19:04:50
阅读次数：
60
此图是官网提供的一个事例系统图，图中的Server是consul服务端高可用集群，Client是consul客户端。consul客户端不保存数据，客户端将接收到的请求转发给响应的Server端。Server之间通过局域网或广域网通信实现数据一致性。每个Server或Client都是一个consul ...
分类：
其他好文 时间：
2020-02-06 16:31:09
阅读次数：
259
缓存与数据库双写时的数据一致性问题：只要用缓存，就可能会涉及到缓存与数据库双存储双写，你只要是双写，就一定会有数据一致性的问题，那么你如何解决一致性问题？ 一般来说，就是如果你的系统不是严格要求缓存+数据库必须一致性的话，缓存可以稍微的跟数据库偶尔有不一致的情况，最好不要做这个方案，读请求和写请求串 ...
分类：
数据库 时间：
2020-02-05 20:42:34
阅读次数：
105
一直在使用kafka，遇到过很多问题，总结一下很多人对比kafka和AMQP的时候，都会强调kafka会丢数据，感觉好像只要用kafka就会丢数据一样，从而排斥使用kafka，亦或者在使用的过程中，发现数据丢失就认定罪魁祸首是kafka，好像丢数据就是使用kafka的代价。悄悄的鄙视一下这些伪程序猿... ...
分类：
其他好文 时间：
2020-02-03 15:42:43
阅读次数：
56
1、数据一致性如何保证 (线程的安全和线程同步) 线程安全在三个方面体现: 1.原子性：提供互斥访问，串行线程（atomic,synchronized）； 2.可见性：一个线程对主内存的修改可以及时地被其他线程看到，（synchronized,volatile）； 3.有序性：一个线程观察其他线程中 ...
分类：
编程语言 时间：
2020-01-31 18:37:01
阅读次数：
110
数据质量:1/ 数据质量控制环节2/ 元数据管理 数据质量包括:数据的完整性 数据自成体系、无数据缺失（包括实体记录缺失、字段信息缺失）数据一致性： 在整个数仓中，同一数据各主题、层次数据一致正确性： 在数仓各部分、确保数据不失真及时性： 整个数仓处理过程中，数据及时到位、及时反馈 数据质量的控制不 ...
分类：
其他好文 时间：
2020-01-31 14:04:01
阅读次数：
71
ReentrantLock实现了标准的互斥锁：一次最多只有一个线程能够持有相同ReentrantLock。但是互斥通常做为保护数据一致性的很强的加锁约束，因此，过分的限制了并发性。互斥是保守的加锁策略，避免了 “写/写”和“写/读"的重读，但是同样避开了"读/读"的重叠。在很多情况下，数据结构是”频 ...
分类：
其他好文 时间：
2020-01-28 20:53:51
阅读次数：
58
