gpt4 book ai didi

hadoop - HDFS文件系统需要格式化datanode还是只需要格式化namenode

转载 作者:可可西里 更新时间:2023-11-01 15:20:38 27 4
gpt4 key购买 nike

在搭建伪集群或全集群时,是否需要格式化data node来安装HDFS文件系统,还是只需要格式化namenode。

我问这个是因为,我在很多博客上读到过,HDFS 在硬盘上按顺序存储数据,它是一个抽象层,将数据存储在大块上,而不是默认 block 大小存储提供的主机文件系统。

如果我们不格式化datanode,HDFS的强大功能就来折腾了。

最佳答案

格式化和挂载硬盘驱动器与格式化 HDFS 没有直接关系。从概念上讲,“格式化”的想法是相同的。但这两个任务是完全独立的,没有直接关系。

hadoop format 命令不会格式化或挂载硬盘。硬盘驱动器应该已经格式化和安装。当您为 HDFS 运行格式命令时,它正在准备 NameNode fsimage 文件,以便它知道所有存储 block 在数据磁盘中的位置。

关于hadoop - HDFS文件系统需要格式化datanode还是只需要格式化namenode,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/54186393/

27 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com