最近升级cdh版本，从4.5 升级到 5.0.0 beta-2
但是升级后，发现/etc/alternatives 路径下的软链接还是只想旧的4.5 版本，而且hadoop环境也是沿用4.5
的版本conf，导致hive不能正常使用，报错为hdfs 的版本不对。 后面使用strace工具查看，发现它...
分类：
其他好文 时间：
2014-06-07 02:44:21
阅读次数：
248
说明：类似于RDBMS中触发器，允许用户在region服务器上运行自己的代码，在客户端用户不用关心操作具体在哪进行使用场景：权限控制，回调函数(钩子函数)、扫描统计等主要类：observer和endpointobserver：类似触发器，回调函数在特定事件发生时执行endpoint：类似数据库存储过...
分类：
其他好文 时间：
2014-06-03 13:22:54
阅读次数：
229
本篇是本人在做一个大数据项目时，对于系统架构的一点总结，如何在保证存储量的情况下，又能保证数据的检索速度。
分类：
其他好文 时间：
2014-05-30 20:34:01
阅读次数：
405
概括1.
创建、删除及启用禁用表、添加列等都需用到HBaseAdmin，另外需要注意删除，添加列等操作都需要禁用表2.
表中添加数据，查询等都是和HTable相关，如果是多线程的情况下注意用HTablePool3. 插入数据使用Put，可以单行添加也可批量添加4.
查询数据需使用Get，Result...
分类：
编程语言 时间：
2014-05-28 02:19:21
阅读次数：
327
相关知识创建表插入数据删除等见：http://www.cnblogs.com/wishyouhappy/p/3735077.htmlHBase
API简介见：http://www.cnblogs.com/wishyouhappy/p/3753347.html按行、列簇等查询package
wish....
这是这个系列的最后一篇了，实在没精力写了，本来还想写一下hbck的，这个东西很常用，当hbase的Meta表出现错误的时候，它能够帮助我们进行修复，无奈看到3000多行的代码时，退却了，原谅我这点自私的想法吧。在讲《Get、Scan在服务端是如何处理？》当中的nextInternal流程，它的第一步...
分类：
其他好文 时间：
2014-05-26 19:44:29
阅读次数：
254
zookeeper+kafka集群安装之zookeeper集群...
分类：
其他好文 时间：
2014-05-26 04:42:01
阅读次数：
190
先上一张图讲一下Compaction和Split的关系，这样会比较直观一些。Compaction把多个MemStore
flush出来的StoreFile合并成一个文件，而Split则是把过大的文件Split成两个。之前在Delete的时候，我们知道它其实并没有真正删除数据的，那总不能一直不删吧，下...
分类：
其他好文 时间：
2014-05-25 18:41:37
阅读次数：
415
zookeeper+kafka集群安装之二此为上一篇文章的续篇, kafka安装需要依赖zookeeper, 本文与上一篇文章都是真正分布式安装配置, 可以直接用于生产环境.zookeeper安装参考:http://blog.csdn.net/ubuntu64fan/article/details/26678877首先了解几个kafka中的概念:kafka是一个消息队列服务器,服务称为broker...
分类：
其他好文 时间：
2014-05-24 20:48:48
阅读次数：
269
