流计算中可能有各种方式来保存状态： 窗口操作 使用 了KV操作的函数 继承了CheckpointedFunction的函数 当开始做checkpointing的时候，状态会被持久化到checkpoints里来规避数据丢失和状态恢复。选择的状态存储策略不同，会导致状态持久化如何和checkpoints ...
分类：
其他好文 时间：
2018-08-01 19:44:26
阅读次数：
1132
知道BloomFilter是因为RocksDB数据库中用到了这个技术，用于判断1个数据是否存在于1个SST文件中。 BloomFilter可能存在误判，就是判断结果是存在集合中，而实际上可能不存在，概率是很低的。但是判断不存在，则一定就是不存在集合中的。 资料查阅后，BloomFilter还可以用于 ...
分类：
其他好文 时间：
2018-04-15 22:54:38
阅读次数：
192
记下自己对跳表SkipList的理解。 SkipList采用空间换时间的思想，通过增加数据间的链接，达到加快查找速度的目的。 数据库LevelDB和RocksDB中用到了SkipList，Redis中的有序set即zset也用到了SkipList。Java中也提供了ConcurrentSkipLis ...
分类：
其他好文 时间：
2018-04-15 19:41:02
阅读次数：
189
有些c++旧项目用Makefile，要迁移CMake的时候非常痛苦，有些像static pattern的语法和make自带命令 cmake要重写一套非常的麻烦。 因此这里用trick的方法实现了一种include makefile的方法。 大致就是创建一个target用于执行将 include ma ...
分类：
其他好文 时间：
2018-03-29 19:11:03
阅读次数：
170
前言 在mac环境下编译rocksdb，需要配置依赖的编译环境，其中有一项比较麻烦：c++编译要支持C++11,但是在mac环境安装xcode-select --install之后，已经安装有了gcc-4.2.1，而且不容易升级，因为已经存在/usr/bin/gcc，想覆盖这个命令文件比较麻烦。 升 ...
分类：
数据库 时间：
2018-02-28 14:11:19
阅读次数：
12812
Compilation Important: If you plan to run RocksDB in production, don't compile using default make or make all. That will compile RocksDB in debug mode ...
分类：
数据库 时间：
2018-02-28 14:10:48
阅读次数：
4147
欢迎大家前往云+社区，获取更多腾讯海量技术实践干货哦~ 作者：腾讯云数据库内核团队 原文标题：【腾讯云CDB】教你玩转MyRocks/RocksDB—STATISTICS与后台线程篇 0. Intro 在facebook的MySQL版本(以下称为MyRocks)中，RocksDB是可选的存储引擎。相 ...
分类：
数据库 时间：
2018-02-02 14:25:59
阅读次数：
204
工作中业务可能简单,但是背后的知识是复杂的,深度的,你能扯出来,就厉害了. 2016 : 幂等和事务: innodb 如何做的回滚? redo 是基于页的物理和逻辑日志,有 checkSum幂等检查. fuzzy checkpoint 的幂等重试 延迟队列的使用: zset 和 rocksdb , ...
分类：
其他好文 时间：
2018-01-23 22:05:34
阅读次数：
159
分布式系统实践 1. badger 一个高性能的LSM K/V store http://colobu.com/2017/10/11/badger-a-performant-k-v-store 摘要: 一款专门为SSD设计的高性能KV存储引擎, 相比于RocksDB, badger把key和valu ...
分类：
其他好文 时间：
2017-10-20 21:30:17
阅读次数：
227
经过数月的研发测评，开源多模型数据库ArangoDB 终于发布了其 3.2 正式版，该版本消除了两个重大的障碍，添加了一个期待已久的功能，还集成了一个有趣的功能。此外，官方团队表示新版本将 ArangoDB 的性能平均提高了 35%。同时，与 3.1 版本相比，还减少了内存的占用。集群管理方面也有了 ...
分类：
数据库 时间：
2017-08-10 01:13:36
阅读次数：
222
