1：简介 Leveldb是一个google实现的非常高效的kv数据库，可按照字符串键值顺序映射进行存贮。目前的版本1.2能够支持billion级别的数据量了。在这个数量级别下还有着非常高的性能。 Leveldb是一个C++库，可用于很多情况。比如用于一个网页浏览器存储最近存取网页的缓存，或...
分类：
数据库 时间：
2015-07-29 18:40:23
阅读次数：
223
caffe神经网络框架的辅助工具（将图片转换为leveldb格式）这应该是 比较老的版本的caffe了，直接拿来应该不能用了，但是可以参考下caffe中负责整个网络输入的datalayer是从leveldb里读取数据的，是一个google实现的非常高效的kv数据库。因此我们训练网络必须先把数据转成l...
分类：
数据库 时间：
2015-05-05 15:52:42
阅读次数：
595
Redis是Remote Dictionary Server(Redis) 的缩写，或许光听名字你就能猜出它大概是做什么的。不错，它是一个由Salvatore Sanfilippo编写的key-value存储系统，是一个使用ANSI C语言编写、遵守BSD协议、支持网络、可基于内存亦可持久化的日志型的Key-Value数据库，并提供多种语言的API。...
分类：
其他好文 时间：
2015-04-03 17:30:39
阅读次数：
121
alibaba有好几个分布式框架，主要有：进行远程调用(类似于RMI的这种远程调用)的(dubbo、hsf)，jms消息服务(napoli、notify)，KV数据库(tair)等。这个框架/工具/产品在实现的时候，都考虑到了容灾，扩展，负载均衡，于是出现一个配置中心(ConfigServer)的东...
分类：
其他好文 时间：
2014-12-22 15:45:53
阅读次数：
347
caffe中负责整个网络输入的datalayer是从leveldb里读取数据的，是一个google实现的很高效的kv数据库。因此我们训练网络必须先把数据转成leveldb的格式。这里我实现的是把一个目录的全部图片转成leveldb的格式。工具使用命令格格式：convert_imagedata src...
分类：
数据库 时间：
2014-10-02 10:18:32
阅读次数：
322
Redis是一个简单高效的内存KV数据库，基本上下载源码make
install，编译完成，然后进入src目录运行redis-server即可运行。就是因为这么简单往往有朋友直接运行，将没有密码的redis暴漏外网，最终数据被泄漏。鉴于这些血泪的教训，有必要来说一下redis的配置文件，当然这也比较...
分类：
其他好文 时间：
2014-07-22 23:07:55
阅读次数：
378
最近阅读leveldb源码，作为一个保证可靠性的kv数据库其数据与磁盘的交互可谓是极其关键，其中涉及到了不少内存和磁盘同步的操作和策略。为了加深理解，从网上整理了linux池畔同步IO相关的函数，这里做一个罗列和对比。大部分为copy，仅为记录，请各位看官勿喷。 传统的UNIX实现在内核中设有缓冲区...
分类：
系统相关 时间：
2014-07-04 00:08:09
阅读次数：
414
caffe中负责整个网络输入的datalayer是从leveldb里读取数据的，是一个google实现的非常高效的kv数据库。
因此我们训练网络必须先把数据转成leveldb的格式。
这里我实现的是把一个文件夹的所有图片转成leveldb的格式。...
分类：
数据库 时间：
2014-06-27 08:01:59
阅读次数：
264
