* HBase框架基础（五） 本节主要介绍HBase中关于分区的一些知识。 * HBase的RowKey设计 我们为什么要讨论rowKey的设计？或者说为什么很多工作岗位要求有rowKey的优化设计经验？这个我们需要简单的谈一谈HBase的存储情景。 简单讨论： ** 一个Table表可以划分为多个 ...
分类：
其他好文 时间：
2018-01-12 22:36:27
阅读次数：
140
hbase所谓的三维有序存储的三维是指：rowkey（行主键），column key(columnFamily+qualifier)，timestamp(时间戳)三部分组成的三维有序存储。1.rowkey，我们知道rowkey是行的主键，而且hbase只能用个rowkey，或者一个rowkey范围即 ...
分类：
其他好文 时间：
2018-01-08 17:30:17
阅读次数：
168
今天做了一个跨地区机房的压测小程序，主要的思路就是基于事先准备好的rowkey文件，利用多线程模拟并发的rowkey查询，可以实现并发数的自由控制。主要是整个流程下来，遇到了点打包的坑，所以特意记录下。 编写代码 rowkey文件的准备就不说了。首先是HbaseClient的查询接口，由于创建连接的 ...
分类：
其他好文 时间：
2017-11-24 20:20:42
阅读次数：
158
实现原理： 1、读取hbase数据每页的数据时多取一条数据。如：分页是10条一页，第一次查询hbase时， 取10+1条数据，然后把第一条和最后一条rowkey数据保存在redis中，redis中的key为用户的token+URL。即token.set(token+url:list<String>) ...
分类：
编程语言 时间：
2017-11-03 11:21:24
阅读次数：
285
KV数据库： 只是key有多个层级： 表 + rowkey + column family + column 可以扫一个表的所有记录， 可以查一个表内，一个rowkey的所有column family + column对应value 可以查一个表内，一个rowkey，一个column family ...
分类：
其他好文 时间：
2017-09-21 13:44:25
阅读次数：
291
表存储的内容本身上没有类型,都是字节数组.存储的每一条数据都有一个行键,根据行键来划分给对应的regionserver来负责.它是面向列的存储,具体来说是面向列族的存储,每一个列族的数据,根据rowkey进行分发,分给特定的region.Hbase 是面向列族存储的，同属一个列族的数据是存在一起的。 ...
分类：
其他好文 时间：
2017-09-12 09:59:21
阅读次数：
111
Q： Hbase的rk设计，Hbase优化 a\rowkey:hbase三维存储中的关键(rowkey：行键 ，columnKey(family+quilaty)：列键 ，timestamp：时间戳) \rowkey字典排序、越短越好 \使用id+时间：9527+20160517 \使用hash散列 ...
分类：
其他好文 时间：
2017-09-06 15:40:45
阅读次数：
189
1, 数据膨胀后, 才对region进行分区, 效率比较低, 所以需要预创建region, 进行负载均衡写入 2, rowkey的调优 HBase中row key用来检索表中的记录，支持以下三种方式： 通过单个row key访问：即按照某个row key键值进行get操作； 通过row key的ra ...
分类：
其他好文 时间：
2017-09-03 01:10:43
阅读次数：
220
1. HBase to HBase Mapper 继承 TableMapper，输入为Rowkey和Result. Reducer 继承 TableReducer Driver 2. HBase to File Mapper No Reducer Reducer Driver 3. File to ...
分类：
其他好文 时间：
2017-08-28 20:02:21
阅读次数：
143
hbase的完全分布式建立起来了, 可以试下好使不 1, 导包, {HBASE_HOME}/lib 下所有的jar包, 导入 2, 使用junit测试, 会报错, 因为缺少一个jar 3, 获取链接, 只需要提供zookeeper的地址即可 4, 新建表 5, 插入模拟数据 生成模拟rowkey的方 ...
分类：
其他好文 时间：
2017-08-23 10:24:28
阅读次数：
156
