gpt4 book ai didi

apache-spark - 全局启用spark.sql的区分大小写

转载 作者:行者123 更新时间:2023-12-04 13:26:04 33 4
gpt4 key购买 nike

选项spark.sql.caseSensitive控制列名等是否区分大小写。可以设置为经过

spark_session.sql('set spark.sql.caseSensitive=true')

并且默认为 false

似乎无法在 $SPARK_HOME/conf/spark-defaults.conf中使用以下命令全局启用它
spark.sql.caseSensitive: True

尽管。
这是预期的还是有其他文件来设置sql选项?

同样在 source中,强烈建议不要启用它。该建议的依据是什么?

最佳答案

事实证明设置

spark.sql.caseSensitive: True
$SPARK_HOME/conf/spark-defaults.conf中的代码毕竟可以工作。它也只需要在Spark驱动程序的配置中完成,而不是主服务器或工作程序。显然我上次尝试时忘记了这一点。

关于apache-spark - 全局启用spark.sql的区分大小写,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/42946104/

33 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com