1、Hive内部表和外部表区别：主要分为两方面，数据加载load、删除表drop。 数据加载：创建内部表时，会将数据移动到hive指向的路径，并且由hive来管理数据的生命周期。 创建外部表时，只是记录数据所在的路径，不对数据位置做改变。 删除表：删除内部表，数据和元数据会一起删除掉。 删除外部表， ...
分类：
其他好文 时间：
2020-01-28 19:16:01
阅读次数：
68
Hive数据倾斜 key分布不均匀 业务数据本身的特性 SQL语句造成数据倾斜 解决方法 hive设置hive.map.aggr=true和hive.groupby.skewindata=true 还有其他解决方案 Hive内部表和外部表的区别 Hive 创建内部表时，会将数据移动到数据仓库指向的路 ...
分类：
其他好文 时间：
2019-11-17 10:23:34
阅读次数：
94
1. Hive基础 <! TOC "1. Hive基础" "Hive基本概念" "引入原因：" "Hive是什么" "Hive数据管理" "四种数据模型" "Hive内部表和外部表" "Hive数据类型" "Hive的优化" "Map的优化：" "Reduce 的优化" "一个Reduce:" "分 ...
分类：
其他好文 时间：
2018-05-29 00:14:26
阅读次数：
256
知识点1：创建关联Hbase的Hive表 知识点2：Spark访问Hive 知识点3：Spark访问与Hbase关联的Hive表 知识点1：创建关联Hbase的Hive表 两种方式创建，内部表和外部表 内部表，如果删除hive表，hbase表也会删除；不建议使用这种方式，大多数都是关联进行查询操作 ...
分类：
其他好文 时间：
2017-10-03 14:33:31
阅读次数：
207
1：分区表 ? ? ?图：创建分区表 ? ? ? 图：导入数据 ? ? ? ? 图：在HDFS的显示信息 分区字段就是一个文件夹的标识 ? ? ?图：在多列上创建分区 ? ? ? 图：导入数据 ? ? ? ? ? ? ? ? ?图：...
分类：
其他好文 时间：
2015-11-09 15:51:55
阅读次数：
293
一、概念介绍
Hive 没有专门的数据存储格式，也没有为数据建立索引，用户可以非常自由的组织 Hive 中的表，只需要在创建表的时候告诉 Hive 数据中的列分隔符和行分隔符，Hive 就可以解析数据
Hive 中的 Table 和数据库中的 Table 在概念上是类似的，每一个 Table 在 Hive 中都有一个相应的目录存储数据。例如，一个表 ...
分类：
其他好文 时间：
2015-08-02 21:43:34
阅读次数：
191
