apache-spark - 用户在使用 spark.sql 读取数据时没有 ALTERTABLE_ADDCOLS 权限

Question

在 spark.sql 中选择查询导致以下错误:

用户 *username* 没有 ALTERTABLE_ADDCOLS 的权限

Spark 版本 - 2.1.0

尝试执行以下查询:

dig = spark.sql("""select col1, col2 from dbname.tablename""")

Answer 1

这是由 spark.sql.hive.caseSensitiveInferenceMode 属性引起的。默认情况下，spark 会尝试推断表的架构，然后更改其属性。

要避免这些消息，您可以将默认配置更改为 INFER_ONLY。考虑名为 spark 的 spark session ，下面的代码应该可以工作:

spark.conf.set("spark.sql.hive.caseSensitiveInferenceMode", "INFER_ONLY")