sort和uniq的使用

标签：支持   排列   排序   默认   数字   去重   文件组   处理   组合   

uniq是去重的命令，去除重复的行，注意只会去除连续相同行的
uniq -c 统计并显示重复行的个数
uniq常和sort结合：
sort file | uniq -c

uniq和sort组成集合运算：
假设有两个文件：file1和file2
1.求交集，就是输出这两个文件相同的行的结果：
sort file1 file2 | uniq -d
2.求并集
sort file1 file2 |uniq
3.求差集，求只在file1中出现的
sort file1 file2 file2 | uniq -u
4.求对称差集：即file1和file2的并集减去file1和file2的交集，即只在file1或file2中出现的
sort file1 file2 | uniq -u

sort和uniq的使用

标签：支持   排列   排序   默认   数字   去重   文件组   处理   组合   

原文地址：https://blog.51cto.com/13560219/2440293