java - Hadoop名称节点secondarynode突然停止

Question

我有一个经常运行MR作业的节点。系统从两天内开始运行。突然所有的Hadoop过程都停止了。从那以后我所有正在运行的作业都失败了，这很令人讨厌。我有日志说

对于次要名称节点:

java.io.ioexception: cannot lock storage /hdfs/namesecondary. the directory is already locked

对于namenode:

java.io.ioexception: cannot lock storage /hdfs/name. the directory is already locked

我试图退出安全模式并尝试格式化namenode，但这也引发了相同的异常。

我如何开始Hadoop流程。没有磁盘空间问题。它的900GB磁盘和300GB在关闭时可用。

我现在应该验证什么？在这个世界上还没有找到任何线索。

谢谢

Answer 1

我通过删除/ hdfs / name /和/ hdfs / secondarynamenode中的inuse_lock文件解决了该问题。在我格式化了namenode和secondarynamenode之后。