hadoop - 资源管理器 UI 抛出 500 内部服务器错误

Question

我有一个包含 1 个主站和 1 个从站的集群。我的集群工作正常，突然我开始出现以下错误，导致我的资源管理器 UI 未加载:

HTTP ERROR 500

Problem accessing /cluster. Reason:

    INTERNAL_SERVER_ERROR
Caused by:

java.lang.NullPointerException
    at org.apache.http.client.utils.URLEncodedUtils.parse(URLEncodedUtils.java:235)
    at org.apache.hadoop.security.token.delegation.web.ServletUtils.getParameter(ServletUtils.java:48)
    at org.apache.hadoop.security.token.delegation.web.DelegationTokenAuthenticationHandler.managementOperation(DelegationTokenAuthenticationHandler.java:170)
    at org.apache.hadoop.security.authentication.server.AuthenticationFilter.doFilter(AuthenticationFilter.java:502)
    at org.apache.hadoop.yarn.server.security.http.RMAuthenticationFilter.doFilter(RMAuthenticationFilter.java:84)
    at org.mortbay.jetty.servlet.ServletHandler$CachedChain.doFilter(ServletHandler.java:1212)
    at org.apache.hadoop.http.HttpServer2$QuotingInputFilter.doFilter(HttpServer2.java:1224)
    at org.mortbay.jetty.servlet.ServletHandler$CachedChain.doFilter(ServletHandler.java:1212)
    at org.apache.hadoop.http.NoCacheFilter.doFilter(NoCacheFilter.java:45)
    at org.mortbay.jetty.servlet.ServletHandler$CachedChain.doFilter(ServletHandler.java:1212)
    at org.apache.hadoop.http.NoCacheFilter.doFilter(NoCacheFilter.java:45)
    at org.mortbay.jetty.servlet.ServletHandler$CachedChain.doFilter(ServletHandler.java:1212)
    at org.mortbay.jetty.servlet.ServletHandler.handle(ServletHandler.java:399)
    at org.mortbay.jetty.security.SecurityHandler.handle(SecurityHandler.java:216)
    at org.mortbay.jetty.servlet.SessionHandler.handle(SessionHandler.java:182)
    at org.mortbay.jetty.handler.ContextHandler.handle(ContextHandler.java:766)
    at org.mortbay.jetty.webapp.WebAppContext.handle(WebAppContext.java:450)
    at org.mortbay.jetty.handler.ContextHandlerCollection.handle(ContextHandlerCollection.java:230)
    at org.mortbay.jetty.handler.HandlerWrapper.handle(HandlerWrapper.java:152)
    at org.mortbay.jetty.Server.handle(Server.java:326)
    at org.mortbay.jetty.HttpConnection.handleRequest(HttpConnection.java:542)
    at org.mortbay.jetty.HttpConnection$RequestHandler.headerComplete(HttpConnection.java:928)
    at org.mortbay.jetty.HttpParser.parseNext(HttpParser.java:549)
    at org.mortbay.jetty.HttpParser.parseAvailable(HttpParser.java:212)
    at org.mortbay.jetty.HttpConnection.handle(HttpConnection.java:404)
    at org.mortbay.io.nio.SelectChannelEndPoint.run(SelectChannelEndPoint.java:410)
    at org.mortbay.thread.QueuedThreadPool$PoolThread.run(QueuedThreadPool.java:582)

如果我尝试检查正在运行的守护进程，我可以看到 RM 守护进程正在运行:

[hadoop@cluster-test hadoop]$ jps
22263 Jps
21549 NameNode
21888 ResourceManager
21733 SecondaryNameNode

我的 RM 日志中也有以下错误日志，但这些错误不会经常弹出。我不确定这些问题是否相关。想到在这里分享，因为这可能对可能看问题的人有帮助:

2016-07-05 17:41:49,878 ERROR   org.apache.hadoop.yarn.server.resourcemanager.ResourceManager: RECEIVED SIGNAL   15: SIGTERM
2016-07-05 17:41:49,884 ERROR  org.apache.hadoop.security.token.delegation.AbstractDelegationTokenSecretManager : ExpiredTokenRemover received java.lang.InterruptedException: sleep interrupted

我正在使用以下 hadoop 版本:

Hadoop 2.6.0
Subversion https://git-wip-us.apache.org/repos/asf/hadoop.git -r    e3496499ecb8d220fba99dc5ed4c99c8f9e33bb1
Compiled by jenkins on 2014-11-13T21:10Z
Compiled with protoc 2.5.0

请帮忙，因为我已经坚持了很长时间并且无法从谷歌获得太多帮助。

非常感谢任何帮助!

Answer 1

我遇到了类似的问题。原因可能是 hadoop/share/hadoop/common/lib 中的 httpclient jar 中存在一些错误。在我的例子中，我不小心将更高版本的 httpclient 放在该目录中，而该目录恰好是有问题的 httpclient。

查看以下 jira 以获取更多信息: https://issues.apache.org/jira/browse/HADOOP-13215