gpt4 book ai didi

hadoop - GFS/Hadoop master的存储容量

转载 作者:可可西里 更新时间:2023-11-01 14:57:38 24 4
gpt4 key购买 nike

我正在阅读 GFS 论文但无法理解一点,master 是否也为文件的每个副本维护 64kb 的元数据?假设 master 的内存是 8 gb,我存储 1000 个文件,每个文件 1 kb,它需要多少内存?如果复制因子是 3。

最佳答案

GFS 为每个 64 MB block 维护少于 64 字节的元数据,而不是为单个文件维护。每个副本花费相同的元数据开销。因此,1000 个文件占用多少内存取决于这些文件总共有多少 block 。

关于hadoop - GFS/Hadoop master的存储容量,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/34956501/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com