概述：和众多其它数据库一样，Redis作为NoSQL数据库也同样提供了事务机制。在Redis中，MULTI/EXEC/DISCARD/WATCH这四个命令是我们实现事务的基石。相信对有关系型数据库开发经验的开发者而言这一概念并不陌生，即便如此，我们还是会简要的列出Redis中事务的实现特征：1).在事务..
分类：
其他好文 时间：
2015-06-02 20:20:22
阅读次数：
137
语法：Type::=InfixTypeExistentialClausesExistentialClauses::=forSome{ExistentialDcl{semiExistentialDcl}}ExistentialDcl::=typeTypeDcl|valValDcl既存类型具有TforSome{Q}的形式，Q是一个类型声明的序列(§4.3)。设t1[tps1]>n<:Un是Q中声明的类型(任何类型参数部分..
分类：
其他好文 时间：
2015-06-02 20:19:13
阅读次数：
210
dm.fs参数dm.fs可以指定容器的rootfs的文件系统，但只支持ext4/xfs，源码如下funcNewDeviceSet(rootstring,doInitbool,options[]string)(*DeviceSet,error){...case"dm.fs":ifval!="ext4"&&val!="xfs"{returnnil,fmt.Errorf("Unsupportedfilesystem%s\n",val)}devices...
分类：
其他好文 时间：
2015-06-02 20:17:53
阅读次数：
296
详细步骤
一 、简介
Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供完整的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。其优点是学习成本低，可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用，十分适合数据仓库的统计分析。
Hive与HBase的整合功能的实现是利用两者本...
分类：
其他好文 时间：
2015-06-02 17:57:28
阅读次数：
105
有了上面Mapper输出的内存存储结构和硬盘存储结构讨论，我们来仔细分析MapOutputBuffer的流程。首先是成员变量。最先初始化的是作业配置job和统计功能reporter。通过配置，MapOutputBuffer可以获取本地文件系统（localFs和rfs），Reducer的数目和Partitioner。
SpillRecord是文件spill.out{spill号}.index在内存...
分类：
其他好文 时间：
2015-06-02 17:57:00
阅读次数：
112
Transactionalspouts
Trident是以小批量（batch）的形式在处理tuple，并且每一批都会分配一个唯一的transaction id。不同spout的特性不同，一个transactionalspout会有如下这些特性：
1、有着同样txid的batch一定是一样的。当重播一个txid对应的batch时，一定会重播和之前对应txid的batch中同样的tuple...
分类：
其他好文 时间：
2015-06-02 17:56:46
阅读次数：
102
dm.fs
参数 dm.fs 可以指定容器的 rootfs 的文件系统，但只支持 ext4/xfs，源码如下 funcNewDeviceSet(root string, doInit bool, options []string) (*DeviceSet, error) {
...
case"dm.fs":
if val !="ext4" && val != "xfs" {...
分类：
其他好文 时间：
2015-06-02 17:54:14
阅读次数：
150
语法：
Type ::= InfixType ExistentialClauses
ExistentialClauses ::= ?forSome? ?{? ExistentialDcl
{semi ExistentialDcl} ?}?
ExistentialDcl ::= ?type? TypeDcl
| ?val? ValDcl
既存类型具有 T forSome {Q}的形式，Q...
分类：
其他好文 时间：
2015-06-02 17:54:10
阅读次数：
121
hbase只支持对gzip的压缩,对lzo压缩支持不好。在io成为系统瓶颈的情况下，一般开启lzo压缩会提高系统的吞吐量。但这需要参考具体的应用场景，即是否值得进行压缩、压缩率是否足够等等。
想要hbase支持lzo压缩，参照以下步骤：
1 首先要让系统支持lzo动态库，安装lzo-2.00以上版本：http://www.oberhumer.com/opensource/lzo/dow...
分类：
其他好文 时间：
2015-06-02 17:52:53
阅读次数：
141
概述： 和众多其它数据库一样，Redis作为NoSQL数据库也同样提供了事务机制。在Redis中，MULTI/EXEC/DISCARD/WATCH这四个命令是我们实现事务的基石。相信对有关系型数据库开发经验的开发者而言这一概念并不陌生，即便如此，我们还是会简要的列出Redis中事务的实现特征：
1). 在事务中的所有命令都将会被串行化的顺序执行，事务执行期间，Redis不会再为其它客户端的请求...
分类：
其他好文 时间：
2015-06-02 17:51:49
阅读次数：
85
