hadoop - 安全.UserGroupInformation : PriviledgedActionException error for MR

Question

每当我尝试执行 map reduce 作业以写入 Hbase 表时，我都会在控制台中收到以下错误。我正在从用户帐户运行 MR 作业。

错误 security.UserGroupInformation: PriviledgedActionException as:user cause:org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist: file:/data1/input/Filename.csv

我做了 hadoop ls，用户是文件的所有者。

-rw-r--r-- 1 用户 super 组 7998682 2014-04-17 18:49/data1/input/Filename.csv

我所有的守护进程都在完美运行，如果我使用的是 hbase 客户端 api，我可以插入。

请帮助，在此先感谢。

谢谢，公斤

Answer 1

如果你看下面的路径

输入路径不存在:文件:/data1/input/Filename.csv

你可以看到它指向本地文件系统而不是 hdfs。尝试在路径中添加文件系统类型 hdfs 的前缀，如下所示

hdfs://<NAMENODE-HOST>:<IPC-PORT>/data1/input/Filename.csv