个人中心
文章发布
退出
作者热门文章
- html - 出于某种原因，IE8 对我的 Sass 文件中继承的 html5 CSS 不友好？
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景？
30
4
我通常用以下命令启动我的 spark-shell:
./bin/spark-shell --packages com.databricks:spark-csv_2.10:1.2.0,graphframes:graphframes:0.1.0-spark1.6,com.databricks:spark-avro_2.10:2.0.1
jupyter toree install --user --spark_home=/home/eron/spark-1.6.1/ --spark_opts="--packages com.databricks:spark-csv_2.10:1.2.0,graphframes:graphframes:0.1.0-spark1.6,com.databricks:spark-avro_2.10:2.0.1"
最佳答案
您可以在 SPARK_OPTS 环境变量中指定包:
export SPARK_OPTS='--packages com.databricks:spark-csv_2.10:1.4.0'
spark-defaults.conf 也有效:
echo spark.jars.packages=com.databricks:spark-csv_2.10:1.4.0 | sudo tee -a $SPARK_HOME/conf/spark-defaults.conf
关于apache-spark - 在 toree 中安装 spark 包，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/37324574/
30
4
0
我想通过 pip 安装 Toree 包，但我得到了以下错误消息: Could not find a version that satisfies the requirement toree (from
当我为 Jupyter 笔记本安装 PySpark 时，我使用此 cmd: jupyter toree install --kernel_name=tanveer --interpreters=Py
我通常用以下命令启动我的 spark-shell: ./bin/spark-shell --packages com.databricks:spark-csv_2.10:1.2.0,graphfram
“Apache Toree - Scala”的语法高亮显示无法正常工作。当我在单元格中编写一些代码时，Jupyter 不会突出显示它。 但是，当我刷新笔记本时，它会突出显示所有内容: 我已经配置了ke
有没有办法将 Apache Toree 连接到远程 Spark 集群？我看到常见的命令是 jupyter toree install --spark_home=/usr/local/bin/apach
如何使用 Apache Toree - Scala 内核增加 Jupyter 笔记本的单元格宽度？ 通常 from IPython.core.display import display, HTML
我想寻求与 Anaconda Jupyter notebook 相关的帮助。我想在 Jupyter notebook 中编写 PySpark 和 SparkR，我按照在线教程学习如何将 Apache
我正在尝试安装 Jupyter -支持 Spark在 conda http://conda.pydata.org/docs/test-drive.html 的环境(我使用 anaconda distr
我在 Jupyter 上运行 Scala Spark 时遇到问题。以下是我在 jupyter 中加载 Apache Toree - Scala 笔记本时的错误消息。 root@ubuntu-2gb-s
我正在运行 RHEL 6.7，并设置了 Anaconda。 ( python 4.10)。 Jupyter 正在运行 OOTB，默认情况下它具有 Python 内核。一切都很好，所以我可以在 Jupy
Apache Toree 正在寻找 Spark 主目录(默认为“/usr/local/spark”，但是当由于 Spark 是通过 Homebrew 安装而找不到该目录时，它会抛出异常。 jupyte
我正在尝试安装 Apache Toree 内核以实现 spark 兼容性，但我遇到了一条奇怪的环境消息。这是我遵循的过程: 使用 Jupyter 4.1.0 安装最新的 Anaconda 版本 运行:
我是一名优秀的程序员,十分优秀！