使用指定的分隔符为换行符读取文件

Question

我有一个文件，其中用分号“”分隔行.。我想逐行阅读此文件，其中行应基于.而不是换行符的存在。

一种方法是：

f = open('file','r')
for line in f.read().strip().split('.'):
   #....do some work
f.close()

但是，如果我的文件太大，则内存使用效率不高。与其一起阅读整个文件，不如逐行阅读。

open支持参数’newline’，但是此参数仅用None, '', '\n', '\r', and '\r\n'作此处提到的输入。

有什么方法可以有效地读取文件行，但要基于预先指定的分隔符吗？

Answer 1

您可以使用生成器：

def myreadlines(f, newline):
  buf = ""
  while True:
    while newline in buf:
      pos = buf.index(newline)
      yield buf[:pos]
      buf = buf[pos + len(newline):]
    chunk = f.read(4096)
    if not chunk:
      yield buf
      break
    buf += chunk

with open('file') as f:
  for line in myreadlines(f, "."):
    print line