Hadoop： 50070：HDFS WEB UI端口 8020 ： 高可用的HDFS RPC端口 9000 ： 非高可用的HDFS RPC端口 8088 ： Yarn 的WEB UI 接口 8485 ： JournalNode 的RPC端口 8019 ： ZKFC端口 Zookeeper: 218 ...
分类：
Web程序 时间：
2020-03-03 01:09:01
阅读次数：
118
HBase是Hadoop的一个子项目，用JAVA语言实现，是建立在HDFS的基础上的非关系型分布式数据库，目标是通过水平扩展的方式处理非常庞大的表。值得注意的是，HBase并非结构化数据库，而是介于非关系型数据库（nosql）与关系型数据库（RDBMS）之间，仅能存储非结构化数据和半结构化数据。 为 ...
分类：
其他好文 时间：
2020-03-01 00:09:42
阅读次数：
63
HBase 运行机制 Shell 命令操作 HBASE（举例） create 'templagetable' , 'f1', 'f2', 'f3' list 显示 shell 等价 shell 也是等价的 ...
分类：
其他好文 时间：
2020-02-29 13:29:40
阅读次数：
57
1、datax简述 DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台，实现包括 MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、DRDS 等各种异构数据源之间高效的数 ...
分类：
其他好文 时间：
2020-02-27 20:52:31
阅读次数：
264
一.Redis简介 NoSQL介绍：用于解决大规模数据集合多重数据种类带来的挑战，尤其是大数据应用难题。 NoSQL数据库的四大分类： 键值存储数据库：Redis,Oracle BDB,Voldemort 列存储数据库：HBase 文档型数据库：MongoDb 图形数据库：Neo4J NoSQL数据 ...
分类：
其他好文 时间：
2020-02-25 22:59:30
阅读次数：
69
技术点：springcloud + kafka + hbase + mogodb 1、建立实体对象 浏览商品行为 ScanProductLog 收藏商品行为 CollectProductLog 购物车行为 BuyCartProductLog 关注商品行为 AttentionProductLog 2、 ...
分类：
其他好文 时间：
2020-02-23 14:57:19
阅读次数：
95
Apache Spark: http://spark.apache.org/ ...
分类：
其他好文 时间：
2020-02-22 12:08:37
阅读次数：
48
1、region拆分机制region中存储的是大量的rowkey数据,当region中的数据条数过多的时候,直接影响查询效率.当region过大的时候.hbase会拆分region,这也是Hbase的一个优点.HBase的regionsplit策略一共有以下几种：1、ConstantSizeRegionSplitPolicy0.94版本前默认切分策略当region大小大于某个阈值(hbase.hr
分类：
其他好文 时间：
2020-02-17 17:35:33
阅读次数：
102
