有两个意义上的重复记录，一是完全重复的记录，也即所有字段均重复的记录，二是部分关键字段重复的记录，比如Name字段重复，而其他字段不一定重复或都重复可以忽略。例如下表：table1用户办理套餐的记录表，可看出，user_id=33333有两条完全重复的记录，user_id=11111的tc_name...
分类：
数据库 时间：
2014-08-14 16:11:18
阅读次数：
295
查询及删除重复记录的SQL语句1、查找表中多余的重复记录，重复记录是根据单个字段（Id）来判断select * from 表 where Id in (select Id from 表 group byId having count(Id) > 1)2、删除表中多余的重复记录，重复记录是根据单个字段...
分类：
数据库 时间：
2014-08-12 03:05:23
阅读次数：
239
daily price中应该有联合主键，这样插入就不会重复了，不过不要紧。组合主键alter table tb_ul_daily add PRIMARY KEY(ul_id,trading_date)删除重复记录delete from tb_ul_daily where id in (select....
分类：
其他好文 时间：
2014-08-11 02:44:41
阅读次数：
179
下面先来看看例子：table表字段1字段2idname1a2b3c4c5b库结构大概这样，这只是一个简单的例子，实际情况会复杂得多。比如我想用一条语句查询得到name不重复的所有数据，那就必须使用distinct去掉多余的重复记录。select distinct name from table得到的...
分类：
数据库 时间：
2014-08-08 17:24:36
阅读次数：
243
postgre去重复记录，主要用到row定位的一个系统表示 “ctid”，
能查出纯净的不重复的记录，那要删掉重复值也就容易了。
分类：
其他好文 时间：
2014-08-06 17:49:01
阅读次数：
192
场景：在用户通过支付通道支付完成返回时，发现我收到的处理数据记录中有两条同样的数据记录，也就是同一笔钱，我数据库中记为了两条一样的记录。tornado端代码from tornado import genfrom tornado.concurrent import run_on_executorcla...
分类：
数据库 时间：
2014-08-05 19:03:49
阅读次数：
1248
排序+“选择不重复记录”（5）——最近发生的记录
设计要点：排序、筛选、选择不重复记录
秀秀：好啦！看在俺心情好的份上，不跟你这个小心眼计较了，俺答应不再提“理工男”的事了。
阿金：可是俺还要提“选择不重复记录”。
秀秀：还提？证明你很强大？不就是要找“最近的入库记录”？
阿金：还真开窍了。
秀秀：嗨，把日期按降序排序，然后勾选“选择不重复记录”不就行了？
阿金：嗯，
秀秀：还是“...
分类：
其他好文 时间：
2014-08-04 17:56:57
阅读次数：
170
排序+“选择不重复记录”（6）
设计要点：排序、筛选、选择不重复记录、多窗口
阿金：俺也会总结：其实“选择不重复记录”就是提取或抽取出唯一值记录。
秀秀：嗯，比如说找出名称和规格的关键字组合不重复的第一个数据行。
阿金：经典！
秀秀：不是经典，是具体！这样才好理解嘛！
阿金：对对对，俺说的是有点儿抽象，
秀秀：所以，俺叫“秀总”，你不能叫“金总”，
阿金：啊？那俺应该叫什么？
秀...
分类：
其他好文 时间：
2014-08-04 17:56:37
阅读次数：
155
用“删除重复项”提取出现值
设计要点：去掉重复数据
秀秀：嗨！研究了半天“选择不重复记录”，俺才发现有更简单的办法。
阿金：什么
秀秀： “删除重复项”也能做到！
阿金：啊？
秀秀：你看，排序这一步也可以省，选中要去掉重复项的一列或者几列，单击菜单“数据”-“数据工具”-“删除重复项”就可以了。
阿金：它只能提取出现值，不能把整条记录提出来！你发现了没有？
秀秀：呦，就是！...
分类：
其他好文 时间：
2014-08-04 17:49:37
阅读次数：
172
透视表提取不重复记录（1）-出现值
设计要点：不重复、数据透视表
阿金：其实提取不重复记录，俺还有办法。
秀秀：什么？
阿金：数据透视表。
秀秀：又是数据透视表？
阿金：对，建立一个数据透视表，把不想重复的字段都放在行区域，比如“物品名称”，这样就可以得到出现过的名称的唯一值。
秀秀：噢？也挺简单，要是想找到每个物品的所有分类呢？
阿金：自己想想？
秀秀：哼！又拿一把……...
分类：
其他好文 时间：
2014-08-04 17:44:38
阅读次数：
204
