Question

求助一下单行的awk去除重复

Answer 1

一行数据里面  字段存在重复可以用:

如果多行中的某一列存在重复，也和上面差不多，也是用数组【AWK中的数组和其他语言中的“字典”对象很像】，只不过如果是列的话，第一个循环不用写【AWK自动一行一行地处理】$i改为要处理的那一列比如$1第一列；第二个打印数组的循环写在END块里面。