通过Python运行AWS CLI将返回“sh:1:AWS:notfound”错误

Question

我正在尝试使用Python将文件复制到S3存储桶中，如下所示：

cmd = 'aws s3 %s %s' % (filename, bucketname)
os.system(cmd)

它给我一个sh:1:aws:notfound错误。

但是，使用s3cmd效果很好。

为什么s3cmd能工作，而aws不能工作？

另外，我做了哪个aws，它返回：/home/username/anaconda/bin/aws。

s3cmd返回：/home/username/anaconda/bin/s3cmd。

为什么一个根相同，但另一个却不起作用？

Answer 1

直接从zip安装：https://docs.aws.amazon.com/cli/latest/userguide/install-cliv2-linux.html#cliv2-linux安装

curl "https://awscli.amazonaws.com/awscli-exe-linux-x86_64.zip" -o "awscliv2.zip"
unzip awscliv2.zip
sudo ./aws/install

Answer 2

解决此问题的一种快速方法是尝试操作系统调用的完整路径，以查看是否存在路径问题：

cmd = '/path/to/aws s3 %s %s' % (filename, bucketname)
os.system(cmd)

这是一个问题，可能有几个原因，很可能与PATH变量有关（乍一看）。然而，正如文档中提到的，最好不要使用os.system(https://docs.python.org/2/library/os.html#os.system)并使用一些替代方法。

使用子过程：

cmd = ['/path/to/aws', 's3', filename, bucketname]
subprocess.Popen(cmd)

或者只是使用python AWS客户端boto3包。有很多方法，但是这个SO问题中的一个快速例子（如何使用boto3将S3对象保存到文件中）：

import boto3
s3_client = boto3.client('s3')
s3_client.upload_file(filename, bucketname, filename)

这是一个不可测试的moto，这可能是恼人的。相反，如果您想进行测试，可以执行以下操作：

import boto3
s3_resource = boto3.resource('s3')

with open(filename, 'rb') as f:
    binary = f.read()

s3_resource.Bucket(bucketname).put_object(
    Key=filename,
    Body=binary
)

Answer 3

这是因为您的系统中未安装AWSCLI。我也有同样的问题，我试着用pip软件包管理器安装它，使用pip install--user awscli，但它不起作用。因此，我将其直接安装在系统中，如下所示：

curl "https://d1vvhvl2y92vvt.cloudfront.net/awscli-exe-linux-x86_64.zip" -o "awscliv2.zip"
unzip awscliv2.zip
sudo ./aws/install

解决了这个错误。