databricks - 如何启用 Databricks Delta 功能

Question

将我的 Azure Databricks 从标准升级到主要，尝试开始使用 Databricks Delta:

create table t
using delta
as select * from test_db.src_data;

Databricks Delta is not enabled in your account. Please reach out to your account manager to talk about using Delta;

我是客户经理，但找不到此设置。它在哪里？

Answer 1

1. 在 ipynb 和 scala 笔记本中使用 Spark SQL 上下文:

sql("SET spark.databricks.delta.preview.enabled=true")

sql("SET spark.databricks.delta.merge.joinBasedMerge.enabled = true")

1. 在 SQL dbc notebooks 中:

SET spark.databricks.delta.preview.enabled=true

SET spark.databricks.delta.merge.joinBasedMerge.enabled

1. 当您想默认集群支持 Delta 时，同时在环境变量参数中的最后一列 UI 上启动集群>

只有这一行:spark.databricks.delta.preview.enabled=true

1. 或者最后也是最后一个有趣的部分。当您旋转集群时，选择 5.0 或更高版本，我们应该默认为这些人启用 Delta。

最后欢迎来到 Databricks Delta :)

此外，为了帮助您解决您的代码问题，它应该看起来像这样

%sql create table t as select * from test_db.src_data
使用三角洲
分区方式(YourPartitionColumnHere)
位置“/mnt/data/path/to/the/location/where/you/want/these/parquetFiles/to/be/present”