python - 带有 pip 安装的 Apache Spark 无法正常工作

Question

我正在尝试使用 Python 安装 Apache Spark，并在 7 月 11 日的版本中使用了 pip install python 命令。然而，虽然这成功安装并且我可以运行

from pyspark import SparkContext

在 python shell 中，我无法通过运行访问 pyspark shell

pyspark

或 Spark 提交，用

spark-submit.

两者的错误都是“找不到指定的路径”。我在 Windows 上，怀疑我缺少 spark 的 JAR 文件。 pip 安装不应该解决这个问题吗？

Answer 1

pyspark和 spark-submit您的路径中缺少位置(应为 <spark install directory>\bin)。

您可以通过完全指定它们的位置、导航到它们的安装位置并运行 pyspark 来运行它们或将它们添加到您的系统路径。