欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页

Shell中uniq与sort -u文本去重的区别

程序员文章站 2022-03-11 12:04:47
...

Shell中uniq与sort -u文本去重的区别

一次偶然,发现uniq去重仅仅作用于相邻行,而sort -u去重的作用则是全局。

  • test文件内容如下
[root@test ~]# cat test 
aaa
bbb
bbb
aaa
ccc
  • uniq去重,仅作用于相邻行
[root@test ~]# uniq test 
aaa
bbb
aaa
ccc
  • sort -u去重,作用于全局
[root@test ~]# sort -u test 
aaa
bbb
ccc
  • uniq与sort 连用
[root@test ~]# sort test | uniq
aaa
bbb
ccc