gpt4 book ai didi

performance - Hadoop 集群 - 集群的正常形式和安全形式之间的性能差异

转载 作者:可可西里 更新时间:2023-11-01 14:48:20 25 4
gpt4 key购买 nike

普通 Hadoop 集群和配置了 Kerberos 和 SSL 的安全 Hadoop 集群在性能上会有差异吗?

考虑到两种类型的集群的机器配置相同,完成一项工作所需的时间是否不同?如果是,我们是否有关于时差的任何已知时间指标?喜欢,

  • 普通集群 - 1.5 小时
  • 安全集群 - 2.5 小时

最佳答案

是的。由于 Kerberos 和 SSL,所有 API 调用都会产生开销。

作业完成时间会有所不同,但如果不知道 API 在作业中被调用了多少次,就无法知道这是多少时间。一般来说,影响很小,但由于您正在将另一个网络组件引入您的工作流程(KDC),您可能会遇到显着的性能下降取决于您的集群有多大以及 KDC 和您的集群之间的任何网络问题,以及 KDC 的配置方式。有关详细信息,请参阅以下内容。

https://community.hortonworks.com/questions/31205/performance-impact-of-security-ssl-tde-ranger-kerb.html

https://www.cloudera.com/documentation/enterprise/5-8-x/topics/impala_scalability.html#kerberos_overhead_cluster_size

HTTP vs HTTPS performance

关于performance - Hadoop 集群 - 集群的正常形式和安全形式之间的性能差异,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/44037745/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com