码迷,mamicode.com
首页 > 系统相关 > 详细

Linux文件合并去重

时间:2016-11-24 18:11:10      阅读:179      评论:0      收藏:0      [点我收藏+]

标签:code   bsp   去重   删掉   linux   统一   重复   file   sort   

1.取两个文件的交集

cat file1 file2 | sort | uniq -d > file3

 

2.删除两个文件的交集

cat file1 file2 | sort | uniq -q > file3

 

3.取两个文件的并集

cat file1 file2 | sort | uniq > file3

 

4.去除一个文件中的重复行

sort file1 | uniq > file2
注:这里把重复的行统一为一行

sort file1 | uniq -u > file2
注:这里把所有重复的行全部删掉了,一行不留

 

Linux文件合并去重

标签:code   bsp   去重   删掉   linux   统一   重复   file   sort   

原文地址:http://www.cnblogs.com/foundwant/p/6098666.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!