gpt4 book ai didi

hive - 我们如何确定总数。 hive 表的桶数

转载 作者:行者123 更新时间:2023-12-04 08:20:40 24 4
gpt4 key购买 nike

我对 hadoop 有点陌生。根据我的知识桶是固定的。 hive 表中的分区数和 hive 使用 no。 reducer 的总数与总数相同。创建表时定义的桶数。那么谁能告诉我如何计算总数。 hive 表中的桶数。有没有计算桶总数的公式?

最佳答案

让我们看一个场景,其中表大小是:2300 MB,
HDFS 块大小:128 MB

现在,除以 2300/128=17.96

现在,请记住桶的数量始终是 2 的幂。

所以我们需要找到 n 使得 2^n > 17.96

n=5

所以,我将使用桶数作为 2^5=32

希望,它会帮助你们中的一些人。

关于hive - 我们如何确定总数。 hive 表的桶数,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/30730567/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com