使用gsutil自动将存储在本地的文件上传到云存储
我是GCP的新手，我试图构建一个将数据从文件上传到BigQuery的ETL流。在我看来，最好的解决方案是使用gsutil。我今天看到的步骤是：
- （完成）将.zip文件从SFTP服务器下载到虚拟机
- （已完成）解压缩文件
- 将文件从VM上传到云存储
- （完成）自动将文件从云存储上传到BigQuery
共有1个答案
假设您在Linux VM上运行，您可能希望签出inotifywait，正如本问题中提到的那样--您可以将其作为后台进程运行以进行尝试，例如bash/path/to/my/inotify/script.sh&，然后在测试完并找到适合您的工作方式后将其设置为守护进程。
-
我有一个要求，我需要上传文件到谷歌云存储（他拥有并完全维护它）桶。 这个谷歌云存储桶是由我的客户创建的。 我是谷歌云的新手，有亚马逊S3的经验。我在服务器上运行SSI，以将事务数据加载到平面文件。 我为谷歌云创建了一个示例帐户，并安装了谷歌SDK。我可以通过gsutil手动上传文件。 我的问题是 > 我应该如何建议我的客户共享凭据？ 我如何连接到谷歌云存储与提供凭据独立？ 如何通过以上两个步骤将文
-
问题内容： 我试图了解如何使用Node.js在Firebase Storage中上传文件。我的第一次尝试是使用Firebase库： 但是事实证明，Firebase无法从服务器端上传文件，正如在文档中明确指出的那样： Firebase存储不包含在服务器端Firebase npm模块中。相反，您可以使用gcloud Node.js客户端。 在代码中，您可以使用以下方式访问存储分区： 我们可以在没有Go
-
我正在尝试在谷歌云上迁移我的rails应用程序。我已将活动存储与地面军事系统上创建的存储桶连接起来。我上传了bucket中的文件夹“storage”，但应用程序中的所有图像都有404错误。 如何正确迁移GCS中的本地存储文件夹？ 谢谢你的建议
-
我想按照官方文档中提供的示例将一个文件上传到Google云存储 然而，我得到了一个错误： 线程“main”com.google.cloud.storage.StorageException中的异常：获取服务帐户的访问令牌时出错：400个错误请求{“错误”：“无效的授予”、“错误描述”：“无效的JWT:令牌必须是短期令牌（60分钟）并且在合理的时间范围内。请检查JWT声明中的iat和exp值。”位于
-
我从一个网址读取图像并处理它。我需要将这些数据上传到云存储中的一个文件中，目前我正在将这些数据写入一个文件，并上传该文件，然后删除该文件。有没有办法把数据直接上传到云端仓库？
-
从spring boot Controller上传文件到谷歌云存储。请提供我一个代码。 到目前为止，我得到了这样一个代码
-
我在本地开发服务器上运行代码，但使用在项目上配置的GCS默认桶名。 Python 2.7版