数据砖 - 将 dbfs：/文件存储文件下载到我的本地计算机

Question

通常我使用下面的URL将文件从数据砖DBFS文件存储下载到我的本地计算机。

*https://<MY_DATABRICKS_INSTANCE_NAME>/fileStore/?o=<NUMBER_FROM_ORIGINAL_URL>*

然而，这一次文件没有被下载，URL把我带到了Databricks的主页。有没有人对我如何从DBFS下载文件到本地有什么建议？或者应该如何修复URL以使其工作？

任何建议将不胜感激！

沙俊春

Answer 1

方法1:使用Databricks门户GUI，您可以下载完整的结果(最多100万行)。

方法 2： 使用数据砖 CLI

要下载完整结果，请先将文件保存到 dbfs，然后使用 Databricks cli 将文件复制到本地计算机，如下所示。

dbfs cp "dbfs:/FileStore/tables/my_my.csv" "A:\AzureAnalytics"

您可以使用DBFS CLI、DBFS API、Databricks文件系统实用程序(dbutils.fs)、Spark APIs和本地文件API来访问DBFS对象。

在Spark集群中，您可以使用Databricks文件系统实用程序、Spark APIs或本地文件API来访问DBFS对象。

在本地计算机上，您可以使用Databricks CLI或DBFS API访问DBFS对象。

参考：Azure数据库-访问DBFS

DBFS命令行界面（CLI）使用DBFS API向DBFS公开易于使用的命令行界面。使用此客户端，您可以使用与Unix命令行上使用的命令类似的命令与DBFS交互。例如：

# List files in DBFS
dbfs ls
# Put local file ./apple.txt to dbfs:/apple.txt
dbfs cp ./apple.txt dbfs:/apple.txt
# Get dbfs:/apple.txt and save to local file ./apple.txt
dbfs cp dbfs:/apple.txt ./apple.txt
# Recursively put local dir ./banana to dbfs:/banana
dbfs cp -r ./banana dbfs:/banana

参考：安装和配置Azure Databricks CLI

方法3：使用名为DBFS Explorer的第三方工具

DBFS资源管理器是作为上传和下载文件到Databricks文件系统(DBFS)的一种快捷方式而创建的。这将适用于AWS和Azure databrick实例。为了进行连接，您需要在web界面中创建一个不记名令牌。