从谷歌云存储加载模型，无需下载
有没有一种方法可以在不下载模型副本的情况下从谷歌云存储服务模型？比如直接传输数据？
我正在尝试加载一个托管在谷歌云存储上的fasttext模型。每次我运行该程序时，它都需要在桶中获取并下载该模型的副本。
language_model_filename = 'lid.176.bin' // filename in GCS
language_model_local = 'lid.176.bin' // local file name when downloaded
bucket = storage_client.get_bucket(CLOUD_STORAGE_BUCKET)
blob = bucket.blob(language_model_filename)
blob.download_to_filename(language_model_local)
language_model = FastText.load_model(language_model_local)
共有1个答案
如留档所述，您可以使用第三方boto客户端库插件进行云存储。
流式下载示例如下所示：
import sys
downloaded_file = 'saved_data_file'
MY_BUCKET = 'my_app_bucket'
object_name = 'data_file'
src_uri = boto.storage_uri(MY_BUCKET + '/' + object_name, 'gs')
src_uri.get_key().get_file(sys.stdout)
-
我在尝试从谷歌云存储下载CSV文件时遇到了一个问题。出于某种原因，它一直以字节而不是可读文本的形式下载文件。当我在Excel中打开下载的CSV时，Excel已经足够智能，可以将其转换为可读文本。我在这里错过了什么？我检查了谷歌的文档，但找不到任何好的信息来完成它们。提前谢谢你！ 这是错误：UnicodeDecodeError:“utf-8”编解码器无法解码位置15-16的字节：无效的连续字节
-
我是Google Cloud Platform的新手。我已经在datalab上训练了我的模型，并将模型文件夹保存在云存储中。我可以通过右键单击文件将桶中的现有文件下载到本地计算机-
-
我是一个非营利组织的谷歌办公套件管理员，刚刚发现了数据导出功能，这似乎就像个人账户的外卖。 导出文件已经准备好，现在可以从谷歌云平台存储中的存储桶下载。然而，有很多很多文件夹，试图进出每个文件夹来下载很多很多。每个文件中的zip文件听起来都是一个令人头疼的问题。 我在Mac上使用Transmit，它可以通过与Amazon S3的互操作性连接到谷歌云存储。然而，当我连接时，我什么也看不到（因为我不使
-
目前，我正在从谷歌云存储桶中为我的网站加载图像。 我的印象是，一个多区域的谷歌云存储桶应该是互联网上加载图像的最快方式之一。 然而，这似乎不是这样的情况，当我比较瀑布我的网站上的一个竞争对手的图像加载时间是比我好的联盟。 （我的网站网址aelieve.com） 我的网站加载时间/瀑布 比赛加载时间（比赛网址mopro.com）
-
我有一个python脚本，它获取已上传到google云存储桶的文件列表，并尝试以字符串形式检索数据。 代码很简单： 我的问题是，我上传的数据存储在bucket中的文件夹中，因此路径类似于： 当google library试图下载文件时，它会以GET请求的形式获取该文件，该请求将上述路径转换为： 有没有办法阻止这种情况发生/通过这种方式下载文件？干杯
-
我需要从我的谷歌云存储从我的桶中下载NodeJS文件夹。我读了所有的留档，我只找到了下载文件而不是文件夹的方法。我需要获取/下载文件夹以提供用户的下载文件。 有人能帮我吗？