r - 如何在 R 中更新到 SparkR 2.0.0 包

Question

我想从 SparkR 1.4.0 更新至 SparkR 2.0.0 ，但我收到以下错误:
had non-zero exit status
这是因为 SparkR 2.0.0在 CRAN 上不可用。

同样，来自 SparkR 1.6.2至 SparkR 2.0.0 ，我们得到:

Warning in install.packages :
package ‘SparkR’ is not available (for R version 3.3.0)

怎么安装 Spark 2.0.0从那里？ (我不想安装 SparkR，因为它已经安装为 1.6.2 螺母，我必须将其更新为 2.0.0)

Answer 1

SparkR 不仅需要一个 R 包，而且需要拉入整个 Spark 后端。当你想要升级 SparkR 时，你正在升级 Spark，而不仅仅是 R 包。

现在你可能想引用 sparklyr包，因为它使所有这一切变得更加容易。

install.packages("devtools")
devtools::install_github("rstudio/sparklyr")
library(sparklyr)
spark_install(version = "1.6.2")
spark_install(version = "2.0.0")

它还提供了比 SparkR 更多的功能。