pyspark - 齐柏林飞艇无法导入 Pandas 、numpy、scipy

Question

用 zeppelin 编写的代码，当我在那里启动 pyspark 时，它在 shell 中工作和导入正常，但在具有相同代码的 zeppelin 中却没有。

 %pyspark
import pandas

Traceback (most recent call last):
  File "/tmp/zeppelin_pyspark-4245945050627073162.py", line 239, in <module>
    eval(compiledCode)
  File "<string>", line 1, in <module>
ImportError: No module named pandas

Answer 1

这是因为机器上没有安装pandas。

如果没有安装pip，请先安装pip。

sudo curl --silent --show-error https://bootstrap.pypa.io/get-pip.py | python

然后安装 Pandas

sudo pip install pandas

或者像这样使用 [docker]。

docker run -d -p 8080:8080 -t knockdata/zeppelin-highcharts

zeppelin-highcharts image include pandas and Highcharts functionality.