java - 用另一个方法替换作业类中的方法 waitForCompletion()

Question

我目前使用的是 hadoop 2.7.2

我想知道 org.apache.hadoop.mapreduce.job 类 Job 中是否有另一种方法 可以替代方法 waitForCompletion()，因为在我的项目中，waitForCompletion() 调用另一个名为 getProxy() 的方法，它应该在 hadoop-common-2.7.2 中 org.apache.hadoop.ipc 包中的 RPC 类，但它不存在。

但是有一个链接可以证明 RPC 中存在 getProxy() 方法:https://hadoop.apache.org/docs/r1.0.4/api/org/apache/hadoop/ipc/RPC.html

如果你想对源问题有详细的描述，这里是链接:

hadoop mapreduce java program exception: java.lang.NoSuchMethodError

任何帮助将不胜感激。谢谢

Answer 1

您可以尝试添加以下依赖项并运行一次吗。

<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
  <modelVersion>4.0.0</modelVersion>
  <parent>
    <groupId>ncku.hpds.tzulitai</groupId>
    <artifactId>distributed-svm</artifactId>
    <version>0.0.1-SNAPSHOT</version>
  </parent>
  <artifactId>cascade-svm-mr</artifactId>
  <name>cascade-svm-mr</name>
  <description>The Cascade SVM approach, implemented with MapReduce</description>
  <build>
  <plugins>
    <plugin>
        <artifactId>maven-compiler-plugin</artifactId>
        <version>2.3.2</version>
        <configuration>
            <source>1.7</source>
            <target>1.7</target>
        </configuration>
    </plugin>
   </plugins>
  </build>
  <dependencies>
    <dependency>
        <groupId>tw.edu.ntu.csie</groupId>
        <artifactId>libsvm</artifactId>
        <version>3.17</version>
    </dependency>
            <!-- BIG DATA -->
        <dependency>
            <groupId>org.apache.hadoop</groupId>
            <artifactId>hadoop-common</artifactId>
            <version>2.7.2</version>
        </dependency>

        <dependency>
            <groupId>org.apache.hadoop</groupId>
            <artifactId>hadoop-client</artifactId>
            <version>2.7.2</version>
        </dependency>
  </dependencies>
</project>