gpt4 book ai didi

apache-flink - Apache Flink 资源规划最佳实践

转载 作者:行者123 更新时间:2023-12-03 19:07:37 26 4
gpt4 key购买 nike

我正在寻找确定在 Flink 集群上部署流作业所需的最佳资源的建议/最佳实践。
资源是

  • 每个 TaskManager 的任务槽数
  • TaskManager 的最佳内存分配
  • 最大并行度
  • 最佳答案

    blog post给出了一些关于如何调整大小的想法。它用于将正在开发的 Flink 应用程序转移到生产环境。
    在此之前,我不知道有助于调整大小的资源,因为作业的拓扑结构具有巨大的影响。因此,您通常会从 PoC 和低数据量开始,然后推断您的发现。
    Flink docs 上描述了内存设置.我也会为你的 Flink 版本使用合适的页面,因为它最近发生了变化。

    关于apache-flink - Apache Flink 资源规划最佳实践,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/63168505/

    26 4 0
    Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
    广告合作:1813099741@qq.com 6ren.com