欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  科技

linux awk删除文本重复行需要注意强制类型转换的问题

程序员文章站 2022-04-19 15:55:44
这篇文章主要介绍了linux awk删除文本重复行需要注意强制类型转换的问题 ,需要的朋友可以参考下... 16-12-04...

希望删除ip地址前三段相同的多余重复行。测试文本如下:

# cat 1.txt
2.1.10.1
2.1.10.2
2.11.0.1
2.11.0.2

如果数组下标不加引号,在这个特殊的情况下会被强制转换为数字,最终导致统计失败:

# awk 'begin{fs=ofs="."}{if(!a[$1.$2.$3]++)print}' 1.txt
2.1.10.1

# awk -f '.' '{a[$1.$2.$3]++;}end{for(i in a)print i"  "a[i]}' 1.txt
2110  4

数组下标加上引号之后,一切恢复正常:

# awk 'begin{fs=ofs="."}{if(!a[$1"."$2"."$3]++)print}' 1.txt
2.1.10.1
2.11.0.1

# awk -f '.' '{a[$1"."$2"."$3]++;}end{for(i in a)print i"  "a[i]}' 1.txt
2.11.0  2
2.1.10  2

扩展阅读:

http://www.gnu.org/software/gawk/manual/html_node/variable-typing.html