Python関数で繰り返される行を削除するにはどうすればよいですか？

指定されたテキストファイルにbar.txtという名前を付けましょう

Pythonのファイル処理メソッドを使用して、Pythonテキストファイルまたは関数の重複行を削除します。テキストファイルまたは関数は、Pythonプログラムファイルと同じディレクトリにある必要があります。次のコードは、テキストファイルbar.txtの重複を削除する1つの方法であり、出力はfoo.txtに保存されます。これらのファイルは、Pythonスクリプトファイルと同じディレクトリにある必要があります。そうでない場合、機能しません。

ファイルbar.txtは次のとおりです

A cow is an animal.
A cow is an animal.
A buffalo too is an animal.
Lion is the king of jungle.

例

以下のコードは、bar.txtの重複行を削除し、foo.txtに保存します

# This program opens file bar.txt and removes duplicate lines and writes the
# contents to foo.txt file.
lines_seen = set()  # holds lines already seen
outfile = open('foo.txt', "w")
infile = open('bar.txt', "r")
print "The file bar.txt is as follows"
for line in infile:
    print line
    if line not in lines_seen:  # not a duplicate
        outfile.write(line)
        lines_seen.add(line)
outfile.close()
print "The file foo.txt is as follows"
for line in open('foo.txt', "r"):
    print line

出力

foo.txtファイルは次のとおりです

A cow is an animal.
A buffalo too is an animal.
Lion is the king of jungle.