sql 单表/多表查询去除重复记录单表distinct多表group bygroup by 必须放在 order by 和 limit之前，不然会报错***************************************************************************...
分类：
数据库 时间：
2014-08-01 12:49:21
阅读次数：
313
1、查找表中多余的重复记录，重复记录是根据单个字段（peopleId）来判断 select * from people where peopleId in (select peopleId from people group by peopleId having count (peopl...
分类：
数据库 时间：
2014-07-27 22:38:29
阅读次数：
233
1.随机取3条记录
select top 3 * from tablename newid().
2.随机选记录
select newid().
3.删除重复记录
1) delete from tablename where id not in (select
max(id) from tablename group by col1,col2,...)
2)...
分类：
数据库 时间：
2014-07-22 22:38:33
阅读次数：
246
查询及删除重复记录的SQL语句 1、查找表中多余的重复记录，重复记录是根据单个字段（peopleId）来判断 select * from people where peopleId in (select?? peopleId from?? people group by?? peopleId hav...
分类：
数据库 时间：
2014-07-21 10:29:12
阅读次数：
265
select * from [DataBase].[dbo].[TableName] where [字段一] in (select [字段一] from [DataBase].[dbo].[TableName] group by [字段一] having count([字段一]) > 1)1、查找表...
分类：
数据库 时间：
2014-07-19 19:13:10
阅读次数：
285
数据库中对于重复字段的记录（duplicate records）数据的相关操作...
分类：
其他好文 时间：
2014-07-12 20:56:06
阅读次数：
259
总结之前工作中遇到的一个问题。
背景：
运维用scribe从apache服务器推送过来的日志有重复记录，所以这边的ETL处理要去重，还有个需求是要按业务类型多目录输出，方便挂分区，后面的使用。
这两个需求单独处理都没有问题，但要在一个mapreduce里完成，需要一点技巧。
1、map输入数据，经过一系列处理，输出时：
if(ttype.equals("other"))...
分类：
其他好文 时间：
2014-07-11 00:20:13
阅读次数：
226
排序+“选择不重复记录”（2）——每组的最小值记录
设计要点：排序、筛选、选择不重复记录
秀秀：真没想到“选择不重复记录”是干这个的。
阿金：啊？！那可不是，这只是一个用途，俺考考你，怎么找到每个分类中最小库存量的那个物品？
秀秀：嗯——，第一步，按分类，物品名称、库存数量排序，第二步，单击“数据”-“筛选”-“高级”-勾选“选择不重复记录”……
阿金：第二步的关键是 “列表...
分类：
其他好文 时间：
2014-07-02 11:16:38
阅读次数：
119
排序+“选择不重复记录”（3）——最大值记录
设计要点：排序、筛选、选择不重复记录
秀秀：俺有点明白“选择不重复记录”了，
阿金：那，如果要提取每个分类最大库存量的那个物品，怎么办呢？
秀秀：就把库存数量按降序排序呗。
阿金：噢？还真明白了。
秀秀：当然啦！不仅明白，俺还会总结呢，
阿金：又总结啦？
秀秀：其实就是用排序把同样分类和名称的记录放在一起，然后用“选择不重复记录”把...
分类：
其他好文 时间：
2014-07-02 11:15:57
阅读次数：
174
排序+“选择不重复记录”（1）——提取出现值
设计要点：排序、筛选、选择不重复记录
秀秀：快快快！帮帮忙，主任让俺打印所有库存物品分类，但是俺的表里每个分类里又包含多个物品名称，所以每个分类有好几行呢，怎么打啊？
阿金：哎呦——求俺这个“理工男”了？用你的“文艺范”的花边解决呐。
秀秀：去，少废话！要是主任尅了俺，你也别想好受！
阿金：好好好，怕你了，告诉你一个简单办法。第一步，按分类排...
分类：
其他好文 时间：
2014-07-02 11:06:01
阅读次数：
171
