hadoop - 如何将配置单元连接到基于 Hadoop 2 的集群？

Question

我设置了一个基于 Hadoop2 的集群，其中包含一个名称节点和两个数据节点。我也有一个边缘节点，我想在那里设置 Hive。我想以这样的方式配置/设置 Hive，使其仅利用集群资源运行其查询相关的 MapReduce 作业。通过一些谷歌搜索，似乎对于 Hadoop1，设置以下属性可以完成这项工作(虽然不确定)。

<property>
<name>mapred.job.tracker</name>
<value>hostname:portno</value>
</property>

但在 Hadoop2 的情况下，不确定要更改的正确属性是什么。会不会像下面这样？

<property>
<name>yarn.resourcemanager.address</name>
<value>namenodehostname:50040</value>
</property>

Answer 1

Edge Node 只是一个用于提交 Map-reduce 或 Hive 作业的接口(interface)。Edge Node 有类似的 conf 文件，因此它可以将 Cluster 作为一个整体来识别。因此，边缘节点端不需要这样的单独配置。提交作业时，它将始终引用主 hadoop 集群中的 core-site yarn-site hive-site 文件并采取相应行动。但是您可以引用以下需要在 Hadoop 服务器端配置的 XML enter image description here