gpt4 book ai didi

hadoop - hadoop LocalJobRunner无法正常工作?

转载 作者:行者123 更新时间:2023-12-02 21:48:37 25 4
gpt4 key购买 nike

我正在尝试从hadoop权威指南第三版中运行示例。在第5章中,作者演示了使用LocalJobRunner类,该类有助于从本地找到的输入数据运行hadoop作业,并在本地输出结果。该作者告诉他将configuratin属性mapred.job.tracker设置为“local”。我已经做到了,但是程序仍然试图在hdfs中找到输入和输出路径。

我的第二个问题是在hadoop 2.3.0 javadocs api中找不到LocalJobRunner类吗?

最佳答案

i have managed to find the answer to my first part of the question. the problem was with my configuration.xml file. i was using following values :

<configuration>
<property>
<name>fs.default.name</name>
<value>hdfs://localhost/</value>
</property>
<property>
<name>mapred.job.tracker</name>
<value>localhost:8021</value>
</property>
</configuration>

实际配置应为
<configuration>
<property>
<name>fs.default.name</name>
<value>file:///</value>
</property>
<property>
<name>mapred.job.tracker</name>
<value>local</value>
</property>
</configuration>

但是我仍然没有找到问题的第二部分的答案,即我无法在hadoop 2.3.0文档中找到LocalJobRunner。这是docs hadoop javadocs的链接

关于hadoop - hadoop LocalJobRunner无法正常工作?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/22985813/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com