欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页

Linux之uniq命令详解

程序员文章站 2024-02-23 23:26:28
...

uniq主要功能是去重。
注意: 去除重复行,应该先排序,然后去重。因为它只对相邻(连续重复)的行去重

一、

文本:a.txt
Hello World
Android
Hello World
Shopping
My name

1.简单去重
sort a.txt|uniq

结果:
Android
Hello World
My name
Shopping
2.某列去重
awk -F ' ' '{print $1}' a.txt|sort|uniq

结果:
Android
Hello
My
Shopping