S3：我的多部分上传器不适用于>5GB的文件

Question

我正在尝试使用多部分上传功能将许多大文件(30GB)上传到S3存储桶。

这是代码。为了避免弄乱这一页，我把它放在一个要点里:https://gist.github.com/twslankard/5296081

上传小于5GB的文件没有问题。根据S3管理控制台中对象的大小，大于5GB的文件似乎被“裁剪”为5GB。

在上传过程中，我没有收到任何异常或错误消息。我在文档中也找不到任何东西表明我做错了什么。

有人能看出我哪里做错了吗？

编辑:我从AWS支持部门了解到，Ruby SDK还不支持多部分上传

Answer 1

根据AWS，Ruby SDK不支持多部分上传。

然而，我发现了一个基于python boto的多部分上传脚本。

https://gist.github.com/chrishamant/1556484

编辑：红宝石 SDK 现在支持分段上传 http://docs.aws.amazon.com/AmazonS3/latest/dev/uploadobjusingmpu-ruby-sdk.html

Answer 2

S3 具有一个策略文档，用于授权表单并对可上传的文件施加限制。其中一个限制是内容长度。来自亚马逊的逐字记录：

内容长度规则，用于检查上载文件的大小是否介于给定的最小值和最大值之间。如果此规则未包含在策略文档中，则用户将能够上传任何大小的文件，最高可达 S3 施加的 5GB 限制。