[toc] 一、部署Hadoop本地模式 1. 搭建linux环境 我用的centos7 2. 在/opt目录下创建目录 3. 安装jdk 4. 下载hadoop https://hadoop.apache.org/releases.html 并解压到/opt/module目录 5. 配置hadoo ...
分类：
其他好文 时间：
2020-05-24 23:42:50
阅读次数：
64
1、Hbase集群的高可用性与伸缩性 HBase可以实现对Regionserver的监控，当个别Regionserver不可访问时，将其负责的分区分给其他Regionsever，其转移过程较快，因为只需要将分区的相关信息转移。Hlog和表中数据实际存储在HDFS上，本身具有多副本机制容错。 Mast ...
分类：
其他好文 时间：
2020-05-23 20:00:09
阅读次数：
88
一、前言RowKey作为HBase的核心知识点，RowKey设计会影响到数据在HBase中的分布，还会影响我们查询效率，所以RowKey的设计质量决定了HBase的质量。是咱们大数据从业者必知必会的，自然也是面试必问的考察点。 那么rowkey到底是什么呢？原理是什么呢？怎么设计RowKey呢？使用 ...
分类：
其他好文 时间：
2020-05-22 21:32:21
阅读次数：
68
问题描述： 昨天晚上都下班了，突然领导发消息实时数据没有了，我去什么鬼，我记得我走的时候数据还是正常启动的，怎么就没数据那， 我们数据是通过flink 从kafka 消费数据，然后写入到hbase.怎么就没数据那什么情况。 然后我去yarn的资源管理器上面查看运行情况 发现，程序挂掉了，什么情况。好 ...
分类：
其他好文 时间：
2020-05-22 19:12:15
阅读次数：
88
该课程总共22讲，分为五个部分。第一部分是课程介绍，对该课程需要使用的工具和课程规划进行一个简单的介绍。第二部分主要介绍kettle工具的安装和相关概念的介绍，并通过一个kettle小案例带领大家入门。第三部分主要讲解kettle工具各种控件的使用。第四部分则讲解kettle工具的一些高阶应用功能。第五部分给大家讲解kettle的实战综合案例。每次课程都是通过案例进行讲解，并提供详细的教案文档。整个讲解深入浅出，通俗易懂。
分类：
其他好文 时间：
2020-05-21 23:52:46
阅读次数：
212
前期准备：hadoop HA环境已搭建成功，zookeeper能正常运行。 安装流程： 1.解压tar zxvf hbase 1.2.6 bin.tar.gz （当前1.2. 版本最为稳定，1.3. 还在优化中） vi /etc/profile?环境变量 export?HBASE_HOME=/had ...
分类：
其他好文 时间：
2020-05-21 19:00:42
阅读次数：
50
hbase权威指南 第四版中文版pdf是一部专注于hbase开源数据库方面的电子书籍，这部电子书详细讲解了Hbase原理、基本概念、基本架构等内容，感兴趣的朋友欢迎来绿色资源网下载使用！ hbase权威指南 第四版中文版介绍 《HBase权威指南》探讨了与Hadoop的高度集成如何使HBase的可伸 ...
分类：
其他好文 时间：
2020-05-21 16:37:27
阅读次数：
113
《HBase实战》是一个完整手册，更是一本HBase项目实战指导，是作者多年使用HBase实践经验的升华。《HBase实战》更是最实用的HBase技术书，书中含有大量真实的应用和代码示例。 《HBase实战》是一本基于经验提炼而成的指南，它教给读者如何运用HBase设计、搭建及运行大数据应用系统。全 ...
分类：
其他好文 时间：
2020-05-21 16:28:09
阅读次数：
201
工作需要，临时接到需求说要做ETL，指定使用kettle。因此开启此番旅程。 需求：通过查询两个库的数据，经过关联后写入到第三个DB中，数据库都是使用的oracle。 一、简单介绍下kettle的工具使用 1、安装jdk并配置环境变量（kettle是java写的） 2、下载kettle工具包 htt ...
分类：
其他好文 时间：
2020-05-19 10:56:01
阅读次数：
101
