Question

python实现文本去重

有一个文本a.txt，存放有：
a 1 2 3 4 5
b 1 3 4 5 6
a 1 2 3 4 5
c 1 2 3 4 5
要求删除重复的条目，存放到b.txt：
a 1 2 3 4 5
b 1 3 4 5 6
c 1 2 3 4 5

Answer 1

obuff = []
for ln in open('a.txt'):
    if ln in obuff:
        continue
    obuff.append(ln)
with open('b.txt', 'w') as handle:
    handle.writelines(obuff)