Python金字塔增加请求超时

Question

我正在处理一个Python金字塔rest api，在其中一个请求中，我需要处理一个excel，每一行我都会得到GPS坐标并进行大量验证，这意味着这个请求可能只需要大约10分钟的处理时间，我需要用json向调用方返回一个响应。我不能通过WebSocket发送任何其他内容。

我的问题是：如何增加此请求的超时？这是我的方法：

@view_config(route_name='client_api_upload',
             request_method='POST',
             renderer='json',
             permission='upload client')
def client_api_upload(request):

    client_id = request.POST['client_id']
    filename = request.POST['file'].filename
    input_file = request.POST['file'].file
    extension = os.path.splitext(filename)[1]
    new_file_name = str(uuid.uuid4())+extension
    file_path = os.path.join(tempfile.gettempdir(), new_file_name)

    with open(file_path, 'wb') as output_file:
        shutil.copyfileobj(input_file, output_file)

    importer = ClientBuildingImporter(client_id=client_id, db_session=request.dbsession)
    importer.import_building_from_excel(excel_file_path=file_path)

    return importer.import_result

谢谢任何帮助

Answer 1

正确的方法是不要在请求中执行长时间运行的任务。

你能做的就是

• 发出初始请求启动任务，立即返回。此请求将任务写入数据库。
• 有一个后台工作进程（例如：芹菜）来处理任务
• 有一个前端轮询/JavaScript/重定向循环来检查后台进程是否完成了任务

Answer 2

我不认为是金字塔关闭了连接，更有可能是网络服务器（Apache/Nginx等）。）为您的应用程序服务。只要有必要，金字塔本身通常很乐意突突前进。

我同意@SamMason的观点，有更好（但更复杂）的方法来正确执行长时间运行的任务，但在某些受控的情况下，有一个长时间运行的请求可以进行大量处理。我有几个迁移/维护脚本，花了几个小时才完成，效果很好。

让所有参与者（Web服务器、代理、浏览器等）满意的诀窍是确保应用程序返回的数据是涓涓细流，不要让HTTP连接闲置。

不幸的是，使用金字塔，流式传输请求并不完全简单，但是有一些资源可以为您指明正确的方向。