gpt4 book ai didi

hadoop - 当 spark 处于本地模式时,是否有任何守护进程运行?

转载 作者:可可西里 更新时间:2023-11-01 16:48:24 27 4
gpt4 key购买 nike

当我们在本地模式下运行 Spark [通过设置 -Dspark.master=local[n] ] 时,这意味着将运行 N 个线程来完成作业。

但是它会在本地 jvm 中启动任何守护进程(驱动程序或执行程序)吗?

最佳答案

在本地模式下,它启动单个 JVM 进程,其中包括单个驱动程序(每个 spark 应用程序始终有一个驱动程序)和只有一个执行程序并置在驱动程序的 JVM 进程中

关于hadoop - 当 spark 处于本地模式时,是否有任何守护进程运行?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/34701350/

27 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com