如何删除文本文件中的重复链接？

Question

我有一个文本文件，里面是这样的：

http://example.pl/folder/this_same1.avi
http://example.pl/folder/this_same1.avi
http://example.pl/folder/this_same2.avi
http://example.pl/folder/this_same2.avi
http://example.pl/folder/this_same3.avi
http://example.pl/folder/this_same3.avi

我想删除所有重复的链接。 输出文件如下所示：

^{pr2}$

Answer 1

哦，我改进了我的回答：

links = set()
with open('file.txt', 'r') as fp:
    for line in fp.readlines():
        links.add(line)

然后可以写回文件：

^{pr2}$

你自己测试一下。。在

Answer 2

如果结构一致且顺序很重要：

links = fp.readlines()[::2]

如果结构不一致，顺序很重要：

^{pr2}$

然后写入文件。在