S3警告：“未为流数据指定内容长度”

Question

我突然开始看到这条警告消息被记录下来，尽管底层aws库的使用或没有任何变化。我一直用的是1.6.9.1版的aws-java-sdk

没有为流数据指定内容长度。流内容将在内存中缓冲，可能会导致内存不足错误。

文件上传方式如下：

client.putObject(bucketName, key, new ByteArrayInputStream(data), new ObjectMetadata())

我怀疑我可能看到了这一点，因为我没有在ObjectMetadata对象上设置内容长度，但这就是之前的情况，并且没有生成警告。

有人知道为什么这个警告信息会突然出现吗？

谢谢

Answer 1

public void s3PutOjectFromStreamCompliant(AmazonS3 s3Client, File inputFile) throws FileNotFoundException {
String s3Bucket = "sample-bucket";
FileInputStream inputStream = null;
try {
    inputStream = new FileInputStream(inputFile);
    ObjectMetadata metadata = new ObjectMetadata();
    // Compliant: specifies the content length of the stream.
    metadata.setContentLength(inputFile.length());
    s3Client.putObject(s3Bucket, inputFile.getName(), inputStream, metadata);
} finally {
    IOUtils.closeQuietly(inputStream, null);
}

}

Answer 2

我知道这已经有一段时间了，但我今天不得不处理这个问题，并在文档中找到了这个解释。

上传文件时，AWS S3 Java 客户端将尝试确定正确的内容类型（如果尚未设置）。用户负责确保在上传流时设置合适的内容类型。如果未提供内容类型且无法由文件名确定，则将使用默认内容类型“应用程序/八位字节流”。

有关Content-Type标头的详细信息，请参见http://www.w3.org/Protocols/rfc2616/rfc2616-sec14.html#sec14.17

在我的例子中，我必须缓冲流，所以我使用了这样的东西（来自这个参考）。

ByteBuffer buffer = new ByteBuffer(...)
...
ObjectMetadata meta = new ObjectMetadata();
meta.setContentLength(buffer.limit());