- android - RelativeLayout 背景可绘制重叠内容
- android - 如何链接 cpufeatures lib 以获取 native android 库?
- java - OnItemClickListener 不起作用,但 OnLongItemClickListener 在自定义 ListView 中起作用
- java - Android 文件转字符串
我刚刚开始使用 Hadoop 2。
使用基本配置安装后,我总是无法运行任何示例。有没有人看到这个问题,请帮助我?
错误是这样的
Error starting MRAppMaster
java.lang.RuntimeException: java.lang.reflect.InvocationTargetException
这是日志
20152015-01-06 11:56:23,194 INFO [main] org.apache.hadoop.mapreduce.v2.app.MRAppMaster: Created MRAppMaster for application appattempt_1420510526926_0002_000001
2015-01-06 11:56:23,362 FATAL [main] org.apache.hadoop.mapreduce.v2.app.MRAppMaster: Error starting MRAppMaster
java.lang.RuntimeException: java.lang.reflect.InvocationTargetException
at org.apache.hadoop.util.ReflectionUtils.newInstance(ReflectionUtils.java:131)
at org.apache.hadoop.security.Groups.<init>(Groups.java:70)
at org.apache.hadoop.security.Groups.<init>(Groups.java:66)
at org.apache.hadoop.security.Groups.getUserToGroupsMappingService(Groups.java:280)
at org.apache.hadoop.security.UserGroupInformation.initialize(UserGroupInformation.java:271)
at org.apache.hadoop.security.UserGroupInformation.setConfiguration(UserGroupInformation.java:299)
at org.apache.hadoop.mapreduce.v2.app.MRAppMaster.initAndStartAppMaster(MRAppMaster.java:1473)
at org.apache.hadoop.mapreduce.v2.app.MRAppMaster.main(MRAppMaster.java:1429)
Caused by: java.lang.reflect.InvocationTargetException
at sun.reflect.NativeConstructorAccessorImpl.newInstance0(Native Method)
at sun.reflect.NativeConstructorAccessorImpl.newInstance(NativeConstructorAccessorImpl.java:62)
at sun.reflect.DelegatingConstructorAccessorImpl.newInstance(DelegatingConstructorAccessorImpl.java:45)
at java.lang.reflect.Constructor.newInstance(Constructor.java:408)
at org.apache.hadoop.util.ReflectionUtils.newInstance(ReflectionUtils.java:129)
... 7 more
Caused by: java.lang.UnsatisfiedLinkError: org.apache.hadoop.security.JniBasedUnixGroupsMapping.anchorNative()V
at org.apache.hadoop.security.JniBasedUnixGroupsMapping.anchorNative(Native Method)
at org.apache.hadoop.security.JniBasedUnixGroupsMapping.<clinit>(JniBasedUnixGroupsMapping.java:49)
at org.apache.hadoop.security.JniBasedUnixGroupsMappingWithFallback.<init>(JniBasedUnixGroupsMappingWithFallback.java:39)
... 12 more
2015-01-06 11:56:23,366 INFO [main] org.apache.hadoop.util.ExitUtil: Exiting with status 1
最佳答案
错误消息:“启动 MRAppMaster 时出错”、“InvocationTargetException”、“UnsatisfiedLinkError”
根本原因:无法在类“org.apache.hadoop.security.JniBasedUnixGroupsMapping”中执行 native 函数“anchorNative”
描述:函数“anchorNative”将调用库“libhadoop.so”中的一个函数。该库的路径由这些环境变量指定:
export JAVA_LIBRARY_PATH
export HADOOP_COMMON_LIB_NATIVE_DIR
在Hadoop源码中,打印java库类路径
System.err.println( (System.getProperty("java.library.path") );
# result
/home/maidinh/hadoop2/build/hadoop-2.6.0-src/hadoop-dist/target/hadoop-2.6.0/lib/native:
/usr/java/packages/lib/amd64:
/usr/lib64:
/lib64:
/lib:
/usr/lib
可以在这些位置找到库“libhadoop.so”的不同版本,从而产生冲突。
解决方法:除native库正确路径(hadoop-2.6.0/lib/native)外,其他目录下的“libhadoop.so”全部删除。
注意:删除hadoop所有相关库
rm -r libhadoop*
rm -r libhdfs*
关于Hadoop 2.6.0 : Basic error "starting MRAppMaster" after installing,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/27791518/
我的想法不多了。...我尝试了许多配置,但没有任何效果。我正在尝试通过hadoop集群上的yarn运行jar文件,仅获得: 2020-10-07 21:27:01,960 INFO [main] or
我是Hadoop的初学者,我尝试使用MR将一些数据导入HBase,但是失败了。控制台显示错误信息: Container exited with a non-zero exit code 1. Last
如果您有帮助,我对sqoop有任何疑问,非常感谢您的帮助。 我从本地计算机编写了一个sqoop命令,将数据从hdfs导出到oracle数据数据库。我在本地计算机上使用hadoop-3.3.0和sqoo
在安装 Hadoop 后,我试图启动一个相当简单的 WordCount(我非常关注 this tutorial),但我得到了这个: 2018-04-05 16:51:00,192 INFO mapre
mapred-site.xml 的内容: mapreduce.framework.name yarn yarn.app.mapreduce.am.env HADOOP_MAPRED_H
我刚刚开始使用 Hadoop 2。 使用基本配置安装后,我总是无法运行任何示例。有没有人看到这个问题,请帮助我? 错误是这样的 Error starting MRAppMaster java.lang
我的查询:我在 ubantu 上安装了配置单元。我之前测试过它是工作文件,但后来它开始出错。 insert into test2 values (1,'Mahendra'); 我的 hive 错误:
当我运行 distcp 将数据从 s3 移动到我的本地 hdfs 时,我在启动 map reduce 作业以复制数据期间遇到此异常: Error: Could not find or load mai
尝试在 Fedora 上执行任何 M/R2 作业时出现此异常。 Hadoop 2.7.3 和 2.8.0 有同样的问题。这包括 Hive。 [hadoop@master hadoop]$ yarn c
我是hadoop的新手。 我正在尝试将Giraph设置为在带有 yarn 的hadoop-2.6.5上运行。 当我提交Giraph作业时,该作业被成功提交但失败,并且在容器syslog中获得以下日志:
将我们的应用程序从 2.6.0 更新到 2.7.1 后,我无法让我们的映射器作业正确运行,作业日志中出现以下内容: SEVERE: Error starting MRAppMaster java.la
我是一名优秀的程序员,十分优秀!