Question

求助，使用awk、sed消除区域内出现的重复行

以#号为区域，进行去重，不影响到其他#号范围的内容.
(#号固定，#后的字符随机出现，但不会重复.)
txt内容如下：
#AA
1
2
1
3
A
2
…(省略)
#EFG
1
2
22
33
22
…
去重结果：
#AA
1
2
3
A
…
#EFG
1
2
22
33
…
(#号为段落，去掉#号以下的重复内容)

Answer 1

假设你有文件dup2.txt，内容如下

#AA
1
2
1
3
A
2
A
3
#EFG
1
2
22
33
22
33
44

代码：

#!/bin/bash

awk '
/^#/{
    delete seen
    print
    next
}

{
    if(seen[$0]++)
        next
    else 
        print 
}' dup2.txt

追问

感谢!请问用gawk在windows下应该怎么写?

Answer 2

sed "1d;$d" file

追问

这是删除第一行和最后一行，并不是去重复行啊……