hadoop - 为什么启动 YARN NodeManager 会抛出 KosmosFileSystem 文件系统异常？

Question

我正在尝试使用 Cloudera Manager 在我的 CDH 5.2.0 集群上启动 YARN NodeManager。系统中的所有其他事件节点都在 Cloudera Manager 中的配置下正常启动，但一个节点拒绝启动，并在启动时抛出此异常:

2015-01-09 04:12:17,619 ERROR org.apache.hadoop.yarn.server.nodemanager.NodeManager: Error starting NodeManager
java.lang.UnsupportedOperationException: Not implemented by the KosmosFileSystem FileSystem implementation
    at org.apache.hadoop.fs.FileSystem.getScheme(FileSystem.java:216)
    at org.apache.hadoop.fs.FileSystem.loadFileSystems(FileSystem.java:2564)
    at org.apache.hadoop.fs.FileSystem.getFileSystemClass(FileSystem.java:2574)
    at org.apache.hadoop.fs.FileSystem.createFileSystem(FileSystem.java:2591)
    at org.apache.hadoop.fs.FileSystem.access$200(FileSystem.java:91)
    at org.apache.hadoop.fs.FileSystem$Cache.getInternal(FileSystem.java:2630)
    at org.apache.hadoop.fs.FileSystem$Cache.get(FileSystem.java:2612)
    at org.apache.hadoop.fs.FileSystem.get(FileSystem.java:370)
    at org.apache.hadoop.fs.FileSystem.getLocal(FileSystem.java:341)
    at org.apache.hadoop.yarn.server.nodemanager.NodeManager.initAndStartRecoveryStore(NodeManager.java:140)
    at org.apache.hadoop.yarn.server.nodemanager.NodeManager.serviceInit(NodeManager.java:190)
    at org.apache.hadoop.service.AbstractService.init(AbstractService.java:163)
    at org.apache.hadoop.yarn.server.nodemanager.NodeManager.initAndStartNodeManager(NodeManager.java:445)
    at org.apache.hadoop.yarn.server.nodemanager.NodeManager.main(NodeManager.java:492)

这对我来说根本没有任何意义:为什么它会在启动时尝试初始化这个闻所未闻的文件系统，更不用说对其执行操作了？看起来这是在 NodeManager 恢复期间，(initAndStartRecoveryStore)，所以我尝试删除该节点上的 yarn.nodemanager.recovery.dir 以查看它是否会有所作为，它没有。

感谢您能给我的任何帮助!

Answer 1

java.lang.UnsupportedOperationException:KosmosFileSystem 文件系统实现未实现 https://groups.google.com/a/cloudera.org/forum/#!msg/cdh-user/GJINA22DL5Q/xM4k2yCpftgJ