如何使用StringIO将url上传到s3 bucket，并使用boto3的put_对象方法

Question

我需要上传网址到一个s3桶，我正在使用boto3。我想我有一个解决方案，这个问题：如何保存S3对象到一个文件使用boto3，但当我去下载文件，我仍然得到错误。目标是让他们下载为音频文件，而不是URL。我的代码：

    for row in list_reader:
        media_id = row['mediaId']
        external_id = row['externalId']
        with open('10-17_res1.csv', 'a') as results_file:
            file_is_empty = os.stat('10-17_res1.csv').st_size == 0
            results_writer = csv.writer(
            results_file, delimiter = ',', quotechar = '"'
            )
            if file_is_empty:
                results_writer.writerow(['fileURL','key', 'mediaId','externalId'])

            key = 'corpora/' + external_id + '/' + external_id + '.flac'
            bucketname = 'my_bucket'

            media_stream = media.get_item(media_id)
            stream_url = media_stream['streams'][0]['streamLocation']


            fake_handle = StringIO(stream_url)
            s3c.put_object(Bucket=bucketname, Key=key, Body=fake_handle.read())

我的问题是，我需要更改什么，以便将文件作为音频文件而不是URL保存在s3中？

Answer 1

我通过使用smart_open模块解决了这个问题：

        with smart_open.open(stream_url, 'rb',buffering=0) as f:
            s3.put_object(Bucket=bucketname, Key=key, Body=f.read())

请注意，如果没有'buffering=0'参数，它将无法工作。