使用 python 的 Azure Databricks dbfs

Question

在azure databricks中，通过简单地添加两个点，我可以得到不同的dbfs目录列表结果。谁能向我解释一下为什么会发生这种情况？

Answer 1

使用 dbutils，您只能使用“dbfs:/”路径。如果您没有在路径开头指定“dbfs:/”，它只会自动添加它。

dbutils.fs.ls('pathA')
--> dbfs:/pathA

与

完全相同

dbutils.fs.ls('dbfs:/pathA')

但是如果您不使用“:”，那么它会默默地添加它。

dbutils.fs.ls('dbfs/pathB')
--> dbfs:/dbfs/pathB

这意味着您的 dbfs/被视为 dbfs:/ 根目录下的文件夹名称 dbfs

为避免混淆，请始终将 dbfs:/ 指定为您的路径。