使用AWS CLI从S3获取上次修改的对象

Question

我有一个用例，在这个用例中，我以编程方式启动一个EC2实例，从S3复制一个可执行文件，运行它并关闭实例（在用户数据中完成）。我只需要从S3获取最后添加的文件。

有没有办法使用AWS CLI工具从S3存储桶中获取上次修改的文件/对象？

Answer 1

aws s3api list-objects-v2 --bucket "bucket-name" |jq  -c ".[] | max_by(.LastModified)|.Key"

Answer 2

过了一会儿有一个小更新如何做它有点优雅：

aws s3api list-objects-v2 --bucket "my-awesome-bucket" --query 'sort_by(Contents, &LastModified)[-1].Key' --output=text

我们可以通过[-1]

此命令仅在没有任何外部依赖项的情况下执行此任务：

aws s3api list-objects-v2 --bucket "my-awesome-bucket" --query 'reverse(sort_by(Contents, &LastModified))[:1].Key' --output=text

Answer 3

您可以使用aws s3 ls$bucket--recursive列出bucket中的所有对象：

$ aws s3 ls $BUCKET --recursive
2015-05-05 15:36:17          4 an_object.txt
2015-06-08 14:14:44   16322599 some/other/object
2015-04-29 12:09:29      32768 yet-another-object.sh

它们按键按字母顺序排序，但第一列是最后一次修改时间。一个快速的排序将按日期重新排序：

$ aws s3 ls $BUCKET --recursive | sort
2015-04-29 12:09:29      32768 yet-another-object.sh
2015-05-05 15:36:17          4 an_object.txt
2015-06-08 14:14:44   16322599 some/other/object

tail-n1选择最后一行，awk'{print$4}'提取第四列（对象的名称）。

$ aws s3 ls $BUCKET --recursive | sort | tail -n 1 | awk '{print $4}'
some/other/object

最后但并非最不重要的一点是，将其放入aws s3 cp以下载对象：

$ KEY=`aws s3 ls $BUCKET --recursive | sort | tail -n 1 | awk '{print $4}'`
$ aws s3 cp s3://$BUCKET/$KEY ./latest-object