每次打开/关闭Python文件与保持打开状态直到完成该过程

Question

我有大约50 GB的文本文件，正在检查每行的前几个字符，并将这些字符写入为该开始文本指定的其他文件中。

例如。我的输入包含：

cow_ilovecow
dog_whreismydog
cat_thatcatshouldgotoreddit
dog_gotitfromshelter
...............

因此，我想按牛，狗和猫（约200种）分类处理它们，所以，

if writeflag==1:
    writefile1=open(writefile,"a") #writefile is somedir/dog.txt....
    writefile1.write(remline+"\n")
    #writefile1.close()

那么，什么是最好的方法，我应该关闭吗？否则，如果我保持打开状态，是否writefile1=open(writefile,"a")在做正确的事情？

Answer 1

您绝对应该尽量少打开/关闭文件

因为即使与文件读写相比，文件打开/关闭也要昂贵得多

考虑两个代码块：

f=open('test1.txt', 'w')
for i in range(1000):
    f.write('\n')
f.close()

和

for i in range(1000):
    f=open('test2.txt', 'a')
    f.write('\n')
    f.close()

第一个花费 0.025 秒，第二个花费 0.309秒