（一）hadoop 相关安装部署1、hadoop在windows cygwin下的部署：http://lib.open-open.com/view/1333428291655http://blog.csdn.net/ruby97/article/details/7423088http://blog....
分类：
数据库 时间：
2014-07-22 22:50:55
阅读次数：
517
Hbase特征：
最近在学习Hbase，Hbase基于行健是建立了索引的，查询速度会非常快，完全实时。
但是Hbase要基于行健之外的字段进行查询，那么就只能是全盘扫描，基本上不可接受。
所以Hbase一般来说会针对具体的应用场景来设计行健，利用基于行健的查询的实时性来达到Hbase数据的实时查询。
关系型数据库基于索引字段的实时查询：
然后联想到关系型SQL数据库，他们针对主键是...
分类：
数据库 时间：
2014-07-22 00:07:33
阅读次数：
282
前言：ansible的结果默认是输出到cli终端和日志里面的，用惯了saltsatck的returners数据回调后，也很是喜欢ansible也有，一开始不知道有这个功能，自己也简单实现了这样的功能。我的实现方式是，在模块里面做一些输出的逻辑。当使用ansiblerunnerapi的时候，是在后面runner代码..
分类：
数据库 时间：
2014-07-21 12:22:24
阅读次数：
1144
Java环境配置 数据库 缓存Redis Nosql MongoDB 安装...
分类：
数据库 时间：
2014-07-20 00:38:29
阅读次数：
380
又想速度快，又要大数据，又要保证数据不出错，还要拥抱变化，改需求的时候不那么痛苦，特别是字段的调整，按照以前的做法，想想就头疼。使用NoSQL，简直就是随心所欲，再奇葩的数据结构，处理起来也很容易。下面看我如何用NoSQL数据库实现高并发，高可靠的CRM系统。
分类：
数据库 时间：
2014-07-18 19:07:48
阅读次数：
419
是不是经常要分析用户的行为？是不是经常遇到多台server上传的日志一起分析？是不是对数据统计的间隔时间要求非常短？还有木有由于日志文件过大，而须要分块处理？1、说明一点在日志写入的时候必须依照一种严格的格式，这样在做解析的时候，才好分割。比方 gameid：123 gameid：2333。分割统一...
分类：
数据库 时间：
2014-07-18 09:33:58
阅读次数：
337
NoSQL数据库一改关系型数据库的缺点，更容易的集成、分布式、无模式、故障恢复等特点，正在一步步餐食关系型数据库的市场，作为一个与时俱进的码农了解一下新技术是必须的，尤其是在读了《NoSql精粹》之后，更是想体验一下NoSql数据库的威力。 MongoDB是一种文档数据库，也就是说对于领域模型...
分类：
数据库 时间：
2014-07-18 09:32:19
阅读次数：
287
MongoDB教程MongoDB 是一个开源的文档数据库，并领先的 NoSQL 数据库。 MongoDB是由c++语言编写。 本教程会介绍创建和部署高度可扩展和高性能的面向对象数据库MongoDB 概念和理解。本教程是专为软件专业人员学习MongoDB数据库提供简单轻松的步骤。本教程会帮助你理解 M...
分类：
数据库 时间：
2014-07-18 08:16:01
阅读次数：
209
1. Tair ldb简单介绍
1.1 tair非持久化/持久化存储引擎
tair 是淘宝自己开发的一个分布式 key/value 存储引擎. tair 分为持久化和非持久化两种使用方式. 非持久化的 tair 可以看成是一个分布式缓存. 持久化的 tair 将数据存放于磁盘中. 在最新版本的tair trunk中目前实现了以下4种存储引擎。
非持久化：mdb持久化：fdb、kdb和...
分类：
数据库 时间：
2014-07-16 17:22:51
阅读次数：
399
在项目中大量使用zincrby命令，原因就是要统计日志中某个指标的计数值，且需要按顺序返回topn。
正常来说，一个指标调用一次zincrby（zincrby default:type 1 typeA) 就可以正常工作。
实际情况是由于日志生成的太快，redis cpu利用率经常100%，而且还丢数据。
是否可以一次性增加多次指标的累计值，比如zincrby default:type 1 t...
分类：
其他好文 时间：
2014-07-16 16:43:55
阅读次数：
333
