hadoop - 错误 : while processing statement: FAILED: Hive Internal Error: hive. mapred.supports.subdirectories 必须为真

Question

我遇到了一个错误

Error while processing statement: FAILED: Hive Internal Error: hive.mapred.supports.subdirectories must be true if any one of following is true: hive.optimize.listbucketing , mapred.input.dir.recursive and hive.optimize.union.remove.

当我尝试从 HDFS 目录递归加载数据到 hive 表时发生此错误

我尝试设置以下参数:

SET mapred.input.dir.recursive=true; SET hive.mapred.supports.subdirectories=true; SETmapred.input.dir.recursive=true;

但它一直抛出相同的错误，可能是哪里出了问题？

谢谢你的建议

Answer 1

这似乎是 Cloudera 中 Hue 的问题。目前，我正在使用 CDH 5.11.2，只是在尝试设置相同的语句时遇到了这个问题。

如果您通过直线(命令行)连接以访问配置单元并在那里执行您的设置语句和查询，它应该可以工作。我刚刚验证了这一点。