关系型数据库与非关系型数据库关系型数据库:一个机构化的数据库,创建在关系模型基础上,一般面向于记录包括oracle,mysql,sqlserver,db2非关系型数据库:除了主流的关系型数据库意外的数据库,都人为是非关系型的包括redis,mongdb,hbase,couhdb非关系型数据库产生背景对数据库高并发读写需求对海量数据高效存储与访问需求对数据库高可扩展性与高可用需求Redis简介Red
分类:
数据库 时间:
2019-12-15 16:08:28
阅读次数:
101
1 详细异常信息 2 解决心路历程 A尝试命令修复,不起作用 sudo -u hbase <!--?xml version="1.0" encoding="UTF-8"?--> hbase hbck repair B 尝试重新分配,继续修复,不起作用 sudo -u hbase <!--?xml v ...
分类:
其他好文 时间:
2019-12-14 22:52:52
阅读次数:
169
Hive与HBase的区别Hive架构原理Hive的数据模型及各模块的应用场景Hive支持的文件格式和压缩格式及各自特点Hive内外表的区分方法及内外部差异Hive视图如何创建、特点及应用场景Hive常用命令及作用Hive常用的10个系统函数及作用简述UDF/UDAF/UDTF是什么,各自解决问题及 ...
分类:
其他好文 时间:
2019-12-14 16:10:09
阅读次数:
90
从使用方面讲 Hive是一个构建在Hadoop平台上的数据仓库,可以将结构化的数据文件映射为一张数据库表。通过Hive可以使用HQL语言查询存放在HDFS上的数据。HQL是一种类SQL语言,这种语言最终被转化成Map/Reduce。 HBase 是基于HDFS平台的Key/Value类型的NoSql ...
分类:
其他好文 时间:
2019-12-14 15:36:27
阅读次数:
95
以下操作都在5.0.1版本下进行开发,其余版本可以进行自动比对 本文将对Kettle5中常用步骤字段选择(又名选择/改名值,英文原名:Select Values)进行详细解释。这个步骤的功能非常强大,主要包括: 选择:选择的字段将按照你指定的顺序加入到输出流中,其他字段一概丢弃。除非你选中包含未选择 ...
分类:
数据库 时间:
2019-12-11 19:12:29
阅读次数:
413
安装参考 :https://www.cnblogs.com/qingyunzong/p/8668880.html hbase一般用法, https://www.cnblogs.com/cxzdy/p/5583239.html ...
分类:
其他好文 时间:
2019-12-10 22:40:16
阅读次数:
103
[TOC] 一、简介 在上一篇文章 "HBase 基础入门" 中,我们已经介绍了 HBase 的一些基本概念,以及如何安装使用的方法。 那么,作为一名 Javaer,自然是希望用 Java 的方式来与 HBase 进行对话了。 所幸的是,HBase 本身就是用 Java 编写的,天生自带了 Java ...
分类:
编程语言 时间:
2019-12-09 23:12:20
阅读次数:
159
一、安装&启动 下载 https://hbase.apache.org/downloads.html 快速开始文档 https://hbase.apache.org/book.html quickstart 启动 基本操作 进入控制台 报错 list 显示数据库表 Describe 表名 Scan ...
分类:
其他好文 时间:
2019-12-09 11:47:22
阅读次数:
116
大数据由一系列技术组成,那他们之间的关系是怎么组成的ne,请看下图: hadoop主要做了文件存储系统和提供了一个相对比较弱的mr处理数据的方案 hive是在mr和文件存储系统上面做的升级。 sprak+hbase+hadoop主要解决的是hadoop实时处理数据比较弱的问题 ...
分类:
Web程序 时间:
2019-12-08 10:27:19
阅读次数:
116
1 <!--?xml version="1.0" encoding="UTF-8"?--> hbase hbck -repair 强制修复 如果ok就可以 2 不ok,找到hdfs上对应的该表位置,删除,之后在使用hbase hbck -repair 解决过程: 第一次,使用了方法二,然后解决了问题 ...
分类:
其他好文 时间:
2019-12-08 01:26:29
阅读次数:
128