python - 如何在jupyter笔记本上集成pyspark

Question

我已按照说明将 pyspark 与 jupyter 集成，但完成后我只能在命令提示符下运行 pyspark 。

基本上，当我在命令中使用 ipython 时，它正在工作，但是当我更改为 jupyter 时，它会显示

'"Jupyter "' is not recognized as an internal or external command,
operable program or batch file.

请大家帮忙，我现在真的很累了

注意:我关注了 this进行集成的教程。

到目前为止我已经遵循了这个命令:

  set PYSPARK_DRIVER_PYTHON=ipython 
  set PYSPARK_DRIVER_PYTHON_OPTS = notebook 
  pyspark 

它在 cmd 本身中打开 pyspark

Answer 1

Windows set 命令不接受 = 符号之前的空格。

像这样解决这个问题:

set PYSPARK_DRIVER_PYTHON=ipython 
set PYSPARK_DRIVER_PYTHON_OPTS=notebook 
pyspark

系统想要运行“Jupyter %PYSPARK_DRIVER_PYTHON_OPTS%”可执行文件，但尝试运行“Jupyter”

因此您会收到错误。