Python-如何逐行读取大文件
我想遍历整个文件的每一行。一种方法是读取整个文件,将其保存到列表中,然后遍历感兴趣的行。此方法占用大量内存,因此我正在寻找替代方法。
到目前为止,我的代码:
for each_line in fileinput.input(input_file): do_something(each_line)
for each_line_again in fileinput.input(input_file):
do_something(each_line_again)
执行此代码将显示错误消息:device active
。
有什么建议么?
目的是计算成对的字符串相似度,这意味着对于文件中的每一行,我要计算每隔一行的Levenshtein
距离。
回答:
正确的,完全Python的读取文件的方法如下:
with open(...) as f: for line in f:
# Do something with 'line'
该with语句处理文件的打开和关闭,包括内部块是否引发异常。该for line
in
f会将文件对象f视为可迭代,它会自动使用缓冲I / O
和内存管理,这样你就不必对大文件的担心。
应该有一种-最好只有一种-显而易见的方法。
以上是 Python-如何逐行读取大文件 的全部内容, 来源链接: utcz.com/qa/430018.html