gpt4 book ai didi

apache-spark - 为什么应用程序 UI 存储选项卡不显示广播变量

转载 作者:行者123 更新时间:2023-12-04 04:58:29 24 4
gpt4 key购买 nike

当我在 SPARK 中广播一个变量时,我没有在应用程序网络用户界面的存储选项卡中看到它。查看它使用了多少内存会很方便。有没有显示广播变量的原因?

最佳答案

我遇到了同样的问题,发现这张 2014 年的票还没有解决:https://issues.apache.org/jira/browse/SPARK-3957

它说向驱动程序发送广播变量信息会打开一个新的(非常不必要的) channel 。解决方法拉取请求(在其他信息之上发送广播信息)不知何故随着时间的流逝而丢失了...... https://github.com/apache/spark/pull/2851

关于apache-spark - 为什么应用程序 UI 存储选项卡不显示广播变量,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/40525753/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com