一、简单聚合 1.1 数据准备 // 需要导入 spark sql 内置的函数包 import org.apache.spark.sql.functions._ val spark = SparkSession.builder().appName("aggregations").master("lo ...
分类：
数据库 时间：
2020-06-26 18:03:35
阅读次数：
58
在平时的开发任务中我们经常会用到MYSQL的GROUP BY分组， 用来获取数据表中以分组字段为依据的统计数据。比如有一个学生选课表，表结构如下： Table: Subject_Selection Subject Semester Attendee ITB001 1 John ITB001 1 Bo ...
分类：
其他好文 时间：
2020-06-26 12:32:17
阅读次数：
50
开窗函数简单介绍 与聚合函数一样，开窗函数也是需要对行进行分组, 然后使用聚合算子. 可是它不像普通聚合函数那样每组只返回一个值，而是每一行返回一个窗口的聚合结果. 举例说明 数据如下 hive (default)> select * from over_test; open_test.name o... ...
分类：
其他好文 时间：
2020-06-25 19:37:31
阅读次数：
197
聚合函数：对一组值进行计算，并返回计算后的值，具有统计数据的作用 聚合函数特点： 1 除了 COUNT 以外，聚合函数忽略空值。 2 聚合函数经常与 SELECT 语句的 GROUP BY 子句一同使用。 3 所有聚合函数都具有确定性。任何时候用一组给定的输入值调用它们时，都返回相同的值。 4 标量 ...
分类：
其他好文 时间：
2020-06-24 21:23:58
阅读次数：
60
函数 1.hive函数分类 标准函数 自定义标准函数称之为 UDF 传递一行数据，返回一个结果 聚合函数 自定义聚合函数称之为 UDAF 传递多行数据，返回一个结果 group by sum count 表生成函数 自定义表生成函数称之为 UDTF 传递一行数据，返回多行数据 explode 2.函 ...
分类：
其他好文 时间：
2020-06-23 20:54:23
阅读次数：
64
单表查询 简单查询 查询所有字段 SELECT * FROM 表名 ; 查询指定字段 SELECT 字段名1,字段名2,... FROM 表名 ; 按条件查询 带关系运算符的查询 SELECT *|(字段名1,字段名2,... ) FROM 表名 WHERE 关系表达式 ; "等于 =" "不等于 ...
分类：
数据库 时间：
2020-06-22 01:58:59
阅读次数：
97
一、mysql查询的五种子句 where子句（条件查询）：按照“条件表达式”指定的条件进行查询。 group by子句（分组）：按照“属性名”指定的字段进行分组。group by子句通常和count()、sum()等聚合函数一起使用。 having子句（筛选）：有group by才能having子句 ...
分类：
数据库 时间：
2020-06-19 22:55:34
阅读次数：
69
一、Flask项目目录 （大致是这些文件） --BBS --apps --各个app --forms.py(校验组件) --models.py(模型类) --views.py(视图函数) --static --templates --utils(自定义的文件) --自定义的方法.py --manag ...
分类：
其他好文 时间：
2020-06-17 18:24:55
阅读次数：
101
Mysql 聚合函数嵌套使用 目的：Mysql 聚合函数嵌套使用 聚合函数不可以直接嵌套使用，比如： max（count（*）） 思路:但是可以嵌套子查询使用（先分组取出count值， 再将count值倒序排列，取第一个值就是最大的） select max(total) from ( select ...
分类：
数据库 时间：
2020-06-17 11:11:28
阅读次数：
88
/* Parttion by 关键字是Oracle中分析性函数的一部分， 它和聚合函数不同的地方在于它能够返回一个分组中的多条记录， 而聚合函数一般只有一条反映统计值的结果。 */ --示例查询出每个部门工资最低的员工编号【每个部门可能有多个最低的工资员工】 create table tsaler( ...
分类：
数据库 时间：
2020-06-16 16:46:04
阅读次数：
68
