set hive.mapred.mode=nonstrict; 这是不严格模式,默认如此 对分区表进行查询,若在where子句中没有加分区的话,将禁止提交任务。 把属性值进行设置.默认值是没有开启的。默认是nonstrict 查看hive是否开启严格模式 set hive.mapred.mode 说 ...
分类:
其他好文 时间:
2021-01-26 12:44:54
阅读次数:
0
bigint -2^63 (-9,223,372,036,854,775,808) 到 2^63-1(9,223,372,036,854,775,807) 8 字节 int -2^31 (-2,147,483,648) 到 2^31-1 (2,147,483,647) 4 字节 smallint - ...
分类:
数据库 时间:
2021-01-11 11:09:08
阅读次数:
0
来源:https://mp.weixin.qq.com/s/NdvHxOtVB7AS5P75QdVO7Q 正文目录 1、表层面 1.1 利用分区表优化 1.2 利用分桶表优化 1.3 选择合适的文件存储格式 1.4 选择合适的压缩格式 2、HQL层面优化 2.1 执行计划 2.1 列、行、分区裁剪 ...
分类:
其他好文 时间:
2021-01-05 11:16:21
阅读次数:
0
首次适应算法每次从低地址开始查找,找到第一个能满足大小的空闲分区,顺序查找空闲分区链或者空闲分区表 最佳适应算法(最小分配)按照容量递增从小到大的顺序查找,每次分配内存按前面顺序查找,找到第一个合适的,会留下很多外部碎片 最坏适应算法(最大分配)按容量从大到小顺序查找 邻近适应算法每次分配内存时,从 ...
分类:
编程语言 时间:
2021-01-04 10:58:04
阅读次数:
0
工控主板出现死机是什么原因?相信大家都在关注这个问题,下面就让联智通达小编带大家一起去了解下吧。 工控主板开机是无报警声出现死机,这种情况应首先打开机箱,将键盘、内存、CPU、显卡、以外的所用不见与主板断开,然后开机测试。如果可以正常工作说明其他部件有问题,否则,应首先重插内存、CPU与显卡,然后再 ...
分类:
其他好文 时间:
2021-01-02 11:06:51
阅读次数:
0
使用Linux挂载数据盘 由于没有真是环境,选择在本地模拟 首先在Linux中添加一个盘 在命令行中一下命令查看系统中有的硬盘和分区表 fdisk -l 可以看出有两个盘,sda和sdb,其中sdb没有Disk label 等内容,说明没有挂载,没有分区,现在尝试把sdb挂载到系统中 使用一下命令更 ...
分类:
系统相关 时间:
2020-12-11 12:42:39
阅读次数:
25
相关参数 计信息的持久化功能 系统级 innodb_stats_persistent = ON 表级- STATS_PERSISTENT = 1 统计信息的持久化优化自动计算 系统级--innodb_stats_auto_recalc 表级--STATS_AUTO_RECALC 持久化统计信息时包含 ...
分类:
数据库 时间:
2020-12-10 11:02:16
阅读次数:
5
沈老师,你好,想请教一个数据库查询日志,前台页面显示的问题。需求:(1)按照某些特定检索条件查询日志;(2)通过前台Web页面查询并显示相关日志信息;(3)检索需求包含用户,时间段区间,类型等特定字段;希望做到:(1)查询速度尽可能快;(2)支持分页查询;目前方案:日志信息存储在Oracle中,根据日期对Oracle做了分区处理,每天生成一个分区表,每个分区表中的数据总量大概在1000W左右。在相
分类:
其他好文 时间:
2020-11-10 11:30:08
阅读次数:
11
1.磁盘分区:裁剪分区fdisk---格式化mkfs创建文件系统(mkswap)---挂载mountfdisk/dev/sdb+2G设置大小(n创建新的分区,l列举分区类型,p打印出分区,t修改分区类型,d删除,w保持退出,q单纯退出)vim/etc/fstabpartprobe同步分区表du-sh/*根目录下所以目录占用空间大小添加交换分区fdisk/dev/sdbn创建一个扩展分区,再创建一个
分类:
其他好文 时间:
2020-10-19 22:20:30
阅读次数:
22
hive 建表语法 内部表: create table fzname (id int,name string,age int,tel string) ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' STORED AS TEXTFILE; 1 2 3 4 5 ...
分类:
其他好文 时间:
2020-10-18 16:40:39
阅读次数:
25