hadoop - 错误ql.Driver(SessionState.java:printError(419))-失败:执行错误，从org.apache.hadoop.hive.ql.exec.mr.MapRedTask返回代码-101

Question

因为我在DSE中有5个节点集群和1个Hadoop节点。我正在尝试通过Hiveserver2连接通过JDBC远程使用HiveQL执行Analytics。在每个50 /54 jobs之后，我在Hive日志中遇到错误:

ERROR ql.Driver (SessionState.java:printError(419)) - FAILED: Execution Error,
 return code -101 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask

之后， hiveserver2停止建立连接。我不确定 "hive.server2.async.exec.threads = 50"可能是根本原因。

您能否提出对此错误的任何解决方案？

Answer 1

在hive-site.xml中，您可以定义可以并行执行的作业数:

<property>
    <name>hive.exec.parallel.thread.number</name>
    <value>8</value>
    <description>How many jobs at most can be executed in parallel</description>
  </property>

希望这对您有帮助