hadoop - Job在Cloudera 5.1下的LocalJobRunner中保持运行

Question

需要一些快速帮助。我们的工作在MapR下运行良好，但是当我们在Cloudera 5.1上启动相同的工作时，它会继续以本地模式运行。

我确定这是某种配置问题。这是哪个配置设置？

14/08/22 12:16:58 INFO mapreduce.Job: map 0% reduce 0%
14/08/22 12:17:03 INFO mapred.LocalJobRunner: map > map
14/08/22 12:17:06 INFO mapred.LocalJobRunner: map > map
14/08/22 12:17:09 INFO mapred.LocalJobRunner: map > map

谢谢。

Answer 1

问题是，如果您想启动不应该使用的MapReduce作业，则Cloudera 5.1会在“ yarn ”下运行“ yarn ”发行版:

java -cp $ CLASSPATH CLASSNAME(在Yarn下，它将以本地模式启 Action 业。)

相反，您必须使用

毛线 -cp $ CLASSPATH CLASSNAME

另外，我了解到的另一件事是，您可以通过运行以下命令来获取HADOOP类路径:

yarn 类路径