gpt4 book ai didi

hadoop - HDFS 在我的单节点实验性本地设置中损坏了名称节点

转载 作者:可可西里 更新时间:2023-11-01 14:42:53 26 4
gpt4 key购买 nike

对于我的 Hadoop 实验,我在我的 macbook 上的本地主机上设置了单节点 HDFS。每次实验结束后,我都会关闭 hadoop 服务 (./bin/stop-all.sh)。

几乎每次当我再次启动我的设置(start-all.sh)时,我发现我的 HDFS 已损坏,我总是需要格式化我的名称节点并重新启动服务才能再次访问 HDFS。

我在启动后停止获得名称节点管理员访问权限 (http://localhost:50070/) 时意识到这一点。

在启动过程中,我的名称节点日志说“2012-11-29 15:27:43,160 错误 org.apache.hadoop.hdfs.server.namenode.FSNamesystem:FSNamesystem 初始化失败。org.apache.hadoop.hdfs.server.common.InconsistentFSStateException:目录/private/tmp/hadoop-rupadhyay/dfs/name 处于不一致状态:存储目录不存在或不可访问。”

我不确定我在这里遗漏了什么。

最佳答案

使用 tmp 目录意味着您必须确保在每次重新启动时清除该目录并重新格式化您的名称节点。这是因为操作系统可能会随心所欲地从 tmp 目录中删除文件,从而使您的 hdfs 处于不稳定状态。

关于hadoop - HDFS 在我的单节点实验性本地设置中损坏了名称节点,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/13636809/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com