hadoop - 有关如何从 Hive 查询中设置 Hive 属性的示例

Question

我需要一个快速示例来说明如何使用查询更改配置单元中的属性，例如，我想更改属性“mapred.reduce.tasks”，因此，如何在查询中执行此更改。

我正在为 HDPCD 考试训练自己，考试的目标之一是“从 Hive 查询中设置 Hadoop 或 Hive 配置属性”所以我想这与在 Hive 控制台中执行类似的操作不同:

set mapred.reduce.tasks=2;

Answer 1

要更改 Hadoop 和 Hive 配置变量，您需要在 Hive 查询中使用 set。所做的更改将仅适用于该查询 session

set -v 打印所有 Hadoop 和 Hive 配置变量。

SET mapred.reduce.tasks=XX // In Hadoop 1.X
SET mapreduce.job.reduces=XX // In Hadoop 2.X (YARN)

reset 在查询中将配置重置为默认值