一、背景 1、在Hive Select查询中一般会扫描整个表内容,会消耗很多时间做没必要的工作。有时候只需要扫描表中关心的一部分数据,因此建表时引入了partition概念。 2、分区表指的是在创建表时指定的partition的分区空间。 3、如果需要创建有分区的表,需要在create表的时候调用可 ...
分类:
其他好文 时间:
2018-09-14 13:13:39
阅读次数:
154
实际项目开发中,由于我们不知道实际查询的时候数据库里发生了什么事情,数据库软件是怎样扫描表、怎样使用索引的,因此,我们能感知到的就只有 sql语句运行的时间,在数据规模不大时,查询是瞬间的,因此,在写sql语句的时候就很少考虑到性能的问题。但是当数据规模增大,如千万、亿的时候,我们运 行同样的sql ...
分类:
数据库 时间:
2018-09-06 00:07:03
阅读次数:
208
InnoDB:支持事务处理等不加锁读取支持外键支持行锁不支持FULLTEXT类型的索引不保存表的具体行数,扫描表来计算有多少行DELETE 表时,是一行一行的删除InnoDB 把数据和索引存放在表空间里面跨平台可直接拷贝使用InnoDB中必须包含AUTO_INCREMENT类型字段的索引表格很难被压 ...
分类:
数据库 时间:
2018-08-27 23:22:32
阅读次数:
185
近期因为修改漏洞:Appscan扫描漏洞:加密会话(SSL)Cookie中缺少Secure属性,而涉及到Cookie有关的知识,现结合该漏洞的修复过程和了解的cookie知识总结一下。 一、加密会话(SSL)Cookie中缺少Secure属性漏洞概述: 任何以明文形式发送到服务器的 cookie、会 ...
分类:
其他好文 时间:
2018-07-26 21:17:00
阅读次数:
167
影响sql查询慢的因素1、没有索引或则无效索引导致的全表扫描。2、表的数据量和关联的表数量。致索引无效的情况1、表关联查询时,字段类型或长度不一致。如:varchar(10)和varchar(20)2、查询参数的数据类型与索引字段类型不一致。如int=‘1313‘3、in()索引字段in查询时,通常是有效的。但是当in中指定的数据太多,优化器认为全表扫描更快时,也不会使用索引。4、
分类:
数据库 时间:
2018-07-10 17:43:57
阅读次数:
166
(1)Where子句中:where表之间的连接必须写在其他Where条件之前,那些可以过滤掉最大数量记录的条件必须写在Where子句的末尾.HAVING最后。 需要按照顺序进行一级一级的筛选 (2)用EXISTS替代IN、用NOT EXISTS替代NOT IN。 exists 条件 返回的 是boo ...
分类:
数据库 时间:
2018-03-01 11:42:03
阅读次数:
201
前缀表达式的计算机求值:从右至左扫描表达式,遇到数字时,将数字压入堆栈,遇到运算符时,弹出栈顶的两个数,用运算符对它们做相应的计算(栈顶元素 op 次顶元素),并将结果入栈;重复上述过程直到表达式最左端,最后运算得出的值即为表达式的结果。例如前缀表达式“- × + 3 4 5 6”:(1) 从右至左 ...
分类:
其他好文 时间:
2018-02-01 20:39:33
阅读次数:
854
InnoDB:支持事务处理等不加锁读取支持外键支持行锁不支持FULLTEXT类型的索引不保存表的具体行数,扫描表来计算有多少行DELETE 表时,是一行一行的删除InnoDB 把数据和索引存放在表空间里面跨平台可直接拷贝使用InnoDB中必须包含AUTO_INCREMENT类型字段的索引表格很难被压 ...
分类:
数据库 时间:
2018-01-26 18:48:48
阅读次数:
172
一、背景 1、在Hive Select查询中一般会扫描整个表内容,会消耗很多时间做没必要的工作。有时候只需要扫描表中关心的一部分数据,因此建表时引入了partition概念。 2、分区表指的是在创建表时指定的partition的分区空间。 3、如果需要创建有分区的表,需要在create表的时候调用可 ...
分类:
其他好文 时间:
2018-01-01 16:54:34
阅读次数:
178
恢复内容开始 定义:(直接上例子了) 前缀表达式: - × + 3 4 5 6 运算符位于操作数之前。 中缀表达式: (3 + 4) × 5 - 6 操作符以中缀形式处于操作数的中间。 后缀表达式: 3 4 + 5 × 6 - 运算符位于操作数之后。 表达式求值: 前缀表达式求值:从右至左扫描表达式 ...
分类:
其他好文 时间:
2017-12-10 15:16:42
阅读次数:
111