带有生成器的WSGI文件流

Question

我有以下代码：

def application(env, start_response):
    path = process(env)
    fh = open(path,'r')
    start_response('200 OK', [('Content-Type','application/octet-stream')])
    return fbuffer(fh,10000)


def fbuffer(f, chunk_size):
    '''Generator to buffer file chunks'''  
    while True:
        chunk = f.read(chunk_size)      
        if not chunk: break
        yield chunk

我不确定这是否正确，但是我在互联网上发现的信息残片使我认为它应该起作用。基本上，我想分块地流式传输文件，为此，我要从应用程序函数传回一个生成器。但是，这仅打印出标题，而实际上没有发送回任何数据，有人可以告诉我为什么吗？

或者，如果这是完全错误的，那么执行此操作的最佳方法是什么？我无法将整个文件缓冲在内存中，因为我将要使用的文件可能是千兆字节。

第三级问题：一旦完成输出，关闭文件的最佳方法是什么？在我发布的代码中，我仍然看不到实际上关闭该文件。

（我正在使用uWSGI 1.2.4运行python 3.2.3）

Answer 1

如果不加注意，uwsgi会小心谨慎，以免 泄漏
错误，但是如果您在更严格的实现中运行应用程序，例如python附带的实现wsgiref.simple_server，您会更容易看到问题。

Serving <function application at 0xb65848> http://0.0.0.0:8000
Traceback (most recent call last):
  File "/usr/lib64/python3.2/wsgiref/handlers.py", line 138, in run
    self.finish_response()
  File "/usr/lib64/python3.2/wsgiref/handlers.py", line 179, in finish_response
    self.write(data)
  File "/usr/lib64/python3.2/wsgiref/handlers.py", line 264, in write
    "write() argument must be a bytes instance"
AssertionError: write() argument must be a bytes instance
localhost.localdomain - - [04/Aug/2012 16:27:08] "GET / HTTP/1.1" 500 59

问题是wsgi要求必须以HTTP身份传输往返HTTP网关的数据bytes，但是当您使用时open(path, 'r')，python
3会str使用默认编码方便地将读取的数据转换为unicode，在python 3中是这样。

改变

fh = open(path, 'r')

至

fh = open(path, 'rb')
#                 ^

解决它。