oracle - 使用 Spark 截断 Oracle 表

Question

我的第一个问题在这里!

我正在学习 Spark，到目前为止非常棒。现在我正在使用 DF.write.mode(“append”).jdbc 将一些 DF 写入 Oracle

现在，我需要截断表格，因为我不想追加。如果我使用“覆盖”模式，它将删除该表并创建一个新表，但我将不得不重新授予用户以访问它。不好。

我可以使用 spark SQL 在 Oracle 中执行诸如截断之类的操作吗？打开建议!谢谢你的时间。

Answer 1

有一个选项可以让 Spark 截断目标 Oracle 表而不是删除它。您可以找到语法 https://github.com/apache/spark/pull/14086

spark.range(10).write.mode("overwrite").option("truncate", true).jdbc(url, "table_with_index", prop)

根据 Spark、Oracle 和 JDBC 驱动程序的版本，您可以使用其他参数在级联上进行截断，如您在 https://spark.apache.org/docs/latest/sql-data-sources-jdbc.html 中所见。

根据我的经验，这适用于某些数据库引擎，并且在很大程度上取决于您使用的 JDBC，因为并非所有引擎都支持它

希望这可以帮助