一 单表查询的语法 二 关键字的执行优先级(重点) 1.找到表:from 2.拿着where指定的约束条件,去文件/表中取出一条条记录 3.将取出的一条条记录进行分组group by,如果没有group by,则整体作为一组 4.将分组的结果进行having过滤 5.执行select 6.去重 7. ...
分类:
数据库 时间:
2019-09-20 23:13:37
阅读次数:
186
map和flatMap map flatMap Map和flatMap的区别 sorted/sortedBy/sortWith groupBy reduce/fold reduce reduceLeft reduceRight fold foldLeft foldRight filter/filte ...
分类:
其他好文 时间:
2019-09-20 12:09:00
阅读次数:
79
1.pandas的去重函数drop_duplicates DataFrame.drop_duplicates(subset=None, keep='first', inplace=False) 其中subset参数为用来指定要去重的列,默认是所有列; keep参数有first,last,False三 ...
分类:
其他好文 时间:
2019-09-18 10:47:51
阅读次数:
95
select emp_no,dept_code,name from( select b.emp_no,b.dept_code, b.name, row_number() over(partition by name order by name desc)a from staff_dict b)whe ...
分类:
数据库 时间:
2019-09-17 14:37:01
阅读次数:
134
[TOC] 昨日回顾: 增量式: 监测一个网站, 只要网站有更新的数据, 爬取更新的数据去重: 基于url 基于数据指redis数据库: sadd 集合名 值 judge = sadd 集合名 值: 1).如果该值在集合中已经存在, judge为0, 代表该数据已经爬取过了 2).如果该值不在集合中 ...
分类:
其他好文 时间:
2019-09-17 09:39:44
阅读次数:
95
1.基本数据类型数据去重 2.引用数据类型去重(实际开发中比较常见) ...
分类:
编程语言 时间:
2019-09-16 23:50:09
阅读次数:
132
一、元组 1. 作用:能够存储多个元素,元素与元素之间逗号隔开。元组可以是任意类型,元组不能被修改。 2. 定义 3. 有序or无序 有序 4. 可变or不可变 不可变 5. 常用操作和内置方法 按索引取值(只能取不能存) 切片(顾头不顾尾,步长) 长度 成员运算 循环 计数 查询索引 二、字典 1 ...
分类:
其他好文 时间:
2019-09-16 21:28:25
阅读次数:
86
定义两个个集合: a = {1, 2, 3, 4, 5, 6, 5, 4} b = {5, 6, 7, 8, 9} 1.集合的特点 集合天生去重,且是无序的(即没有角标),可以做关系测试 2.增加 a.add(10) 3.修改 集合需要先把值转化成列表才能进行修改 a.update([333]) 4 ...
分类:
其他好文 时间:
2019-09-16 11:38:08
阅读次数:
71
本文将介绍用 distict、group by 和 row_number() over 。 注:这里的去重是指:查询的时候, 不显示重复,并不是删除表中的重复项,关系删除表中重复数据的sql 请参考一下链接: https://www.cnblogs.com/171207xiaohutu/p/1152 ...
分类:
数据库 时间:
2019-09-15 01:25:58
阅读次数:
207
废话,写在前面 好久没写博客了,懒了,以后自觉写写博客,每周两三篇吧! 简单记录自己的学习经历,算是对自己的一点小小的督促! Java8的新特性很多,比如流处理在工作中看到很多的地方都在用,是时候扔掉笨重的for循环了!节省40% 50%代码量!Come on! 如题 (总结要点) Stream A ...
分类:
编程语言 时间:
2019-09-15 01:14:52
阅读次数:
222