gpt4 book ai didi

presto - Presto中各种内存的清晰解释

转载 作者:行者123 更新时间:2023-12-04 13:02:33 26 4
gpt4 key购买 nike

我是 SO 对 Presto 中的内存设置感到困惑。请在下面查看:

  • query.max-memory
  • query.max-memory-per-node ( base config )
    enter image description here
  • query.max-total-memory ( release in 0.205 )
    enter image description here
  • resources.reserved-system-memory ( admin properties )
    enter image description here
  • 内存池(通用池和保留池)
    enter image description here

  • 这就是我所能找到的。

    这是我的 Presto 设置:
  • etc/config.properties

  • query.max-memory=2.25GB
    query.max-total-memory=2.25GB
    query.max-memory-per-node=0.75GB


  • jvm:-Xmx3G -Xms3G

  • 根据我的设置,我发现了这些规则:
  • query.max-memory-per-node <= jvm * 0.25
  • General Pool = jvm * 0.4,与默认值resources.reserved-system-memory相同
  • 保留池 = jvm * 0.3

  • 以下是我的问题:
  • 各种内存设置之间的关系。 (比如resources.reserved-system-memory是通用池?query.max-total-memory=用户内存+系统内存,什么是用户内存和系统内存?)
  • 通用池和预留池有什么用?我怎样才能改变他们的值(value)观?
  • General Pool(40% of jvm), Reserved Pool(30% of jvm),jvm最后30%在哪里?或者 Presto 如何分配我的 3GB jvm 内存?
  • 最佳答案

    reserved = query.max-memory-per-node 
    system = 40% of heap
    general = heap - system - reserved
  • presto-tuning
  • about the memory manager
  • LocalMemoryManager
  • #10512
  • 关于presto - Presto中各种内存的清晰解释,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/52144822/

    26 4 0
    Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
    广告合作:1813099741@qq.com 6ren.com