当前位置: 首页 > 知识库问答 >
问题:

Google Cloud-将数据从桶下载到实例

轩辕天佑
2023-03-14

我试图下载整个数据从我的桶(跟踪数据)在谷歌云到我的实例(实例-1)在Linux系统。

我在这里看到了一些选择:https://cloud.google.com/compute/docs/instances/transfer-files#transfergcloud但我不确定有没有办法从一个bucket下载到另一个实例

我正在通过我的终端访问我的实例,我已经用gsutil做了几次尝试,但是到目前为止还没有成功。知道如何将整个桶下载到我的实例中吗?(最好把它放在MDNet/data中,我还没有这样的目录,但是我可能应该把数据存储在那里)。

共有3个答案

倪鸿禧
2023-03-14

在最后击中一个空格后添加fullstop对我有帮助

衡子琪
2023-03-14

使用gsutil cpgsutil rsync

https://cloud.google.com/storage/docs/gsutil/commands/cp

https://cloud.google.com/storage/docs/gsutil/commands/rsync

师成弘
2023-03-14

首先,检查计算引擎服务帐户的API访问权限:

例如,只读:

然后,只需使用gsutil cp(doc)或甚至gsutil rsync(doc):

gsutil -m cp -r gs://<your-bucket>/* <destination_folder> 

免责声明:评论和意见是我自己的,不是我雇主的观点。

 类似资料:
  • 问题内容: 目标 将文件从s3存储桶下载到用户计算机。 语境 我正在为React应用开发Python / Flask API。当用户单击前端上的“下载”按钮时,我想将适当的文件下载到他们的计算机上。 我尝试过的 我目前正在使用一些代码来查找下载文件夹的路径,然后将该路径以及他们试图下载的存储桶中的文件作为第二个参数插入到download_file()中。 这在本地有效,并且测试运行良好,但是一旦部

  • 问题内容: 我的目标: 显示一个对话框,提示用户保存从AWS下载的文件。 我的问题: 我目前正在使用awssum- amazon-s3创建下载流。但是,我仅设法将文件保存到服务器或将其流式传输到命令行…如您从我的代码中看到的那样,我的最后一次尝试是尝试手动设置失败的内容处置头。我无法使用res.download(),因为已经设置了标头? 我如何实现我的目标? 我的节点代码: 我的角度代码: 编写此

  • 我需要将存在于Web链接上的数据上传到hdfs,例如“博客”。 现在,我正在寻找实现这一目标的选项,可以找到以下链接: http://blog . cloud era . com/blog/2012/09/analyzing-Twitter-data-with-Hadoop/ 但是通过水槽文档阅读,我不清楚如何设置水槽源来指向博客内容所在的网站。 根据我对 fluem 文档的理解,需要有网络服务器

  • 我正在使用python 2.7. x和Boto API 2. X连接到AWS S3桶。我有一个独特的情况,我想从S3桶下载文件,从一个特定的目录/文件夹说。但问题是我想在S3文件夹中留下一个最新的文件,而不是下载它。一旦,我在我的本地框中下载这些文件,我想将这些文件移动到同一个桶下的不同文件夹说。以前有人处理过类似的情况吗? 以下是一些解释: 将下载的文件从S3存储桶移动到同一存储桶下的不同文件夹

  • 这个请求使得在同一区域的s3中跨存储桶复制对象变得更加容易: 但是,当 是私有访问存储桶并且需要预签名 url 来访问存储桶中的对象时,上述请求将失败。 由于私有访问,文件的访问被拒绝。 com.amazonaws.services.s3.model.AmazonS3Exception: Access Denied (Service: Amazon S3;状态代码: 403;错误代码: 访问已死亡