使用Python请求库保存大文件

Question

我知道获取网址非常简单requests.get，我可以获取原始响应正文并将其保存到文件中，但是对于大型文件，是否可以直接流式传输到文件？就像我要下载电影或类似的东西吗？

Answer 1

奇怪的是，请求没有什么简单的方法。您必须遍历响应并将这些块写入文件：

response = requests.get('http://www.example.com/image.jpg', stream=True)

# Throw an error for bad status codes
response.raise_for_status()

with open('output.jpg', 'wb') as handle:
    for block in response.iter_content(1024):
        handle.write(block)

我通常只是使用urllib.urlretrieve()。它可以工作，但是如果您需要使用会话或某种身份验证，那么上面的代码也可以工作。