maven - 如何将 Spark 测试包含为 Maven 依赖项

Question

我继承了依赖于的旧代码

org.apache.spark.LocalSparkContext 

这是在 Spark 核心测试中。但是 spark core jar(正确)不包括仅测试类。我无法确定 spark 测试类是否/在哪里有自己的 Maven Artifact 。这里的正确方法是什么？

Answer 1

您可以向 test-jar 添加依赖项Spark 通过添加 <type>test-jar</type> .例如，对于基于 Scala 2.11 的 Spark 1.5.1:

<dependency>
  <groupId>org.apache.spark</groupId>
  <artifactId>spark-core_2.11</artifactId>
  <version>1.5.1</version>
  <type>test-jar</type>
  <scope>test</scope>
</dependency>

这个依赖提供了Spark的所有测试类，包括 LocalSparkContext .