作者热门文章
- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
我有混合 Java/Scala 项目。有些 Quartz 作业是用 Java 实现的,并使用一些 Scala 类。这些类应该使用相同的 SparkContext 实例,因此我实现了一些应该是单例的东西,如下所示:
object SparkContextLoader {
var hasSC = false
var sc:Any = 0
def getSC(workers):SparkContext={
if (!hasSC) {
val sparkConf = new SparkConf().setMaster("local[" + workers + "]").setAppName("SparkApp")
sc = new SparkContext(sparkConf)
hasSC = true
}
return sc.asInstanceOf[SparkContext]
}
从两个不同的作业调用 SparkContextLoader 总是会创建一个新的 SparkContext 实例,这是不允许的。
为什么 Scala 对象的行为不像单例?
最佳答案
您的代码过于复杂。如果“两个不同的作业”是不同的线程,那么您需要的是:
object SparkContextLoader {
val sparkConf = new SparkConf().setMaster("local[" + workers + "]").setAppName("SparkApp")
val sc = new SparkContext(sparkConf)
}
然后您可以使用 this question 的答案来访问这些值.
如果“两个不同的作业”是不同的 java 应用程序,则 it doesn't seem有一种方法可以在它们之间共享一个单例。
关于java - 如何在 Scala 中实现真正的单例,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/34702638/
我最近购买了《C 编程语言》并尝试了 Ex 1-8这是代码 #include #include #include /* * */ int main() { int nl,nt,nb;
早上好!我有一个变量“var”,可能为 0。我检查该变量是否为空,如果不是,我将该变量保存在 php session 中,然后调用另一个页面。在这个新页面中,我检查我创建的 session 是否为空,
我正在努力完成 Learn Python the Hard Way ex.25,但我无法理解某些事情。这是脚本: def break_words(stuff): """this functio
我是一名优秀的程序员,十分优秀!