如何在python中解压缩非常大的文件？

Question

使用python 2.4和内置ZipFile库，我无法读取非常大的zip文件（大于1或2
GB），因为它想将未压缩文件的全部内容存储在内存中。还有另一种方法（使用第三方库或其他黑客工具），还是必须“脱壳”并以这种方式解压缩（显然，它不是跨平台的）。

Answer 1

这是对大文件进行解压缩的概述。

import zipfile
import zlib
import os

src = open( doc, "rb" )
zf = zipfile.ZipFile( src )
for m in  zf.infolist():

    # Examine the header
    print m.filename, m.header_offset, m.compress_size, repr(m.extra), repr(m.comment)
    src.seek( m.header_offset )
    src.read( 30 ) # Good to use struct to unpack this.
    nm= src.read( len(m.filename) )
    if len(m.extra) > 0: ex= src.read( len(m.extra) )
    if len(m.comment) > 0: cm= src.read( len(m.comment) )

    # Build a decompression object
    decomp= zlib.decompressobj(-15)

    # This can be done with a loop reading blocks
    out= open( m.filename, "wb" )
    result= decomp.decompress( src.read( m.compress_size ) )
    out.write( result )
    result = decomp.flush()
    out.write( result )
    # end of the loop
    out.close()

zf.close()
src.close()