apache-spark - 如何在Apache Spark开源集群中将用户登录凭据设置为Spark WebUI

Question

我们在我们的项目中使用开源的Apache Spark集群。需要以下帮助。

如何启用Spark Web UI登录的登录凭据？

如何从Spark WebUI禁用“杀死按钮”选项？

有人可以帮助我解决问题1或2或两者兼有吗？

提前致谢。

Answer 1

当然。根据this，您需要设置spark.ui.filters设置以引用实现您要部署的身份验证方法的过滤器类。 Spark不提供任何内置的身份验证筛选器。
您可以看到一个过滤器示例here。

您需要修改ACL，以控制谁有权修改正在运行的Spark应用程序。可以通过配置参数spark.acls.enable，spark.ui.view.acls和spark.ui.view.acls.groups来完成。您可以阅读有关它的更多信息here。