通过Google Cloudendpoint将UImage上载到AWS S3

Question

我们的具体用例是允许我们的用户更新他们的头像。在appserver上，我们进行了单元测试，成功地从文件中计算和上载图像数据到S3，以及它们的base64字符串表示，并返回URL供客户端使用。文件大小从几千字节到几兆字节不等。单元测试覆盖了boto控制器以及调用它的endpoints.api包装器。我们使用源自pythonbase64库的base64字符串以及IOS上的GTLBase64工具进行了测试。这些字符串是网络安全的。在iOS中，我们强制图像为具有最大压缩的160x160 JPG，这将始终产生大约3K的base64字符串。

这是protorpc消息类：

class AvatarUploadRequest(messages.Message):
    uid = messages.StringField(1)
    avatar = messages.BytesField(2)
    content_type = messages.StringField(3)

通过appserver单元测试，我们成功地将图像数据分配给头像bytesfield()，将有效负载发送到boto，然后可以在浏览器中查看S3承载的图像。

当试图通过API资源管理器和生成的iOS客户端与头像上传endpoint交互时，我们的问题就出现了。API服务器经常出现503 Service unavailable故障，使用的是我们在单元测试中使用的已知良好数据。API服务器运行正常，所有其他调用成功完成。

仅对于头像上载endpoint，API资源管理器返回以下响应：

{
    "error": {
        "errors": [{
            "domain": "global",
            "reason": "backendError",
            "message": ""
        }],
        "code": 503,
        "message": ""
    }
}

从POST请求正文中删除avatar有效负载可以删除错误。将执行@endpoints-indared方法中的代码。使用avatar有效负载，在我们实现的上游执行失败（即方法中的任何代码都不运行）。

我们是否遇到了endpointAPI服务器的限制？难道我们不应该用这种方式吗？

浏览文档，没有提到bytesfield()大小的上限。有提到将Blobstore API用于更大的文件（视频、图像等），但它不适合我们的用例；我们不想将图像数据存储在AppEngine或datastore中，我们只需要通过appserver将其传送到S3。

任何洞察力都是非常赞赏的。

Answer 1

我只是想跟进这件事，用我们所做的来解决这个问题。

允许通过谷歌云endpoint上传的二进制数据似乎有一个硬上限。我们没有挖掘到足够深的地方来找到它在哪里执行，相反，我们决定提取一个模块，它的唯一职责是与AWS对话，并使用另一个框架定义新的endpoint。

为了论证起见，我们选择用Flask微框架包装新模块的endpoint，并通过boto库管理二进制数据到AWS的上传。通过云endpoint在上面的原始帖子中失败的相同数据现在通过flask 100%工作。