java - 找不到 Web UI : org/apache/spark/ui/static While creating a Spark application 的资源路径

Question

我正在使用 spark-cassandra-connector 创建一个 java API。当它在 eclipse 上运行时，它工作正常。然后我创建了一个可运行的 jar 文件并通过命令行执行它，它给了我以下错误。

15/02/17 14:56:41 INFO spark.HttpServer: Starting HTTP Server
    15/02/17 14:56:42 INFO server.Server: jetty-8.y.z-SNAPSHOT
    15/02/17 14:56:42 INFO server.AbstractConnector: Started SocketConnector@0.0.0.0:58625
    Exception in thread "main" java.lang.reflect.InvocationTargetException
            at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
            at sun.reflect.NativeMethodAccessorImpl.invoke(Unknown Source)
            at sun.reflect.DelegatingMethodAccessorImpl.invoke(Unknown Source)
            at java.lang.reflect.Method.invoke(Unknown Source)
            at org.eclipse.jdt.internal.jarinjarloader.JarRsrcLoader.main(JarRsrcLoa
    der.java:58)
    Caused by: java.lang.Exception: Could not find resource path for Web UI: org/apache/spark/ui/static    
    at org.apache.spark.ui.JettyUtils$.createStaticHandler(JettyUtils.scala:
    133)
            at org.apache.spark.ui.SparkUI.initialize(SparkUI.scala:70)
            at org.apache.spark.ui.SparkUI.<init>(SparkUI.scala:60)
            at org.apache.spark.ui.SparkUI.<init>(SparkUI.scala:42)
            at org.apache.spark.SparkContext.<init>(SparkContext.scala:222)
            at org.apache.spark.SparkContext.<init>(SparkContext.scala:97)
            at com.netspective.watchtower.bigdata.utils.Config.getSparkContext(Confi
    g.java:32)
            at com.netspective.watchtower.bigdata.main.Main.main(Main.java:17)
            ... 5 more

与 eclipse 日志相比，日志文件之间的唯一区别在于 jetty-server 的版本。在 Eclipse 中，它将 Jetty 服务器版本标识为 8.1.14 v232。但在其标识为 8.y.z SNAPSHOT 之上。 这是因为 jetty 服务器还是其他原因？我完全被困在这里。

我的sparkContext配置如下

  conf.setAppName("Java API demo");
        conf.setMaster("local[*]");

Answer 1

Spark 使用“getResource”读取与其打包的文件。这里它尝试读取一些用于 Web UI 的静态文件，如果文件被打包到 jar 中，这显然不起作用。相反，它们必须被提取到 jar 中，这是 Eclipse 提供的第一个选项: