scala - sc.textFile Scala错误

Question

我正在尝试从写入文件的路径读取文件。我正在关注文档，因此我在使用以下代码行:

 val data = sc.textFile(PATH)

这给出了编译错误:
找不到:值sc。

我找到了涉及应在终端中给出的命令的解决方案，但就我而言，我正在使用eclipse。是否可以通过导入库或类似的方法来解决此问题？

谢谢!

Answer 1

您需要首先创建spark上下文。

例如:

val conf = new SparkConf().setAppName(appName).setMaster(master)
val sc = new SparkContext(conf)

使用Spark Shell时，无需创建spark上下文，因为已经为您创建了spark变量sc。

您可以阅读有关spark上下文初始化 there的更多信息。