azure - 使用 Azure Databricks 中的 Snowpark - 此群集上未启用 Unity Catalog

Question

我尝试使用 Azure Databricks 中的 Snowpark 写入 Snowflake，但收到以下错误。这个错误似乎与Unity Catalog无关，而是与某些配置有关。我已确保已导入所需的库。

df_new.write.mode("append").saveAsTable("MyTableName")

Error: AnalysisException: [UC_NOT_ENABLED] Unity Catalog is not enabled on this cluster.

ADB 运行时:13.3LTS MLPython:3.10.12

Answer 1

正如我所怀疑的，它与 Unity Catalog 无关。我需要从 pandas 数据帧创建一个 Snowpark 数据帧才能使用其写入方法。这解决了我的问题。

#Incorrect
df_new.write.mode("append").saveAsTable("MyTableName")

#Correct
new_session.create_dataframe(df_new).write.mode("append").saveAsTable("MyTableName")

其中 new_session 是 Snowpark session 。

该错误具有误导性。