python - 具有 security.UserGroupInformation : PriviledgedActionException (no such file or directory) 的 map-reduce 作业的 Hadoop 错误-6ren

python - 具有 security.UserGroupInformation : PriviledgedActionException (no such file or directory) 的 map-reduce 作业的 Hadoop 错误

转载作者：行者123 更新时间：2023-11-28 19:22:42

28

4

我正在运行一个简单的流式 map-reduce 作业，但似乎无法解决此错误。

hadoop jar $HADOOP_HOME/contrib/streaming/hadoop-streaming-1.2.1.jar -input textDataFiles/* -output counts -file /home/hduser/first/mapper.py -mapper mapper.py -file /home/hduser/first/reducer.py -reducer reducer.py

结果是:

Warning: $HADOOP_HOME is deprecated.

packageJobJar: [/home/hduser/first/mapper.py, /home/hduser/first/reducer.py] [] /tmp/streamjob1639740860313757975.jar tmpDir=null
14/01/19 00:04:57 INFO util.NativeCodeLoader: Loaded the native-hadoop library
14/01/19 00:04:57 ERROR security.UserGroupInformation: PriviledgedActionException as:hduser cause:ENOENT: No such file or directory
14/01/19 00:04:57 ERROR streaming.StreamJob: Error Launching job : No such file or directory
Streaming Command Failed!

我的映射器和缩减器没有什么特别之处——它是一个简单的字数统计脚本。有什么建议吗？

最佳答案

我最近在学校的 hadoop 集群上遇到了这个问题。
问题出在安装在常规文件系统上的 /tmp/hadoop-USERNAME 目录的权限中。 USERNAME 代表我在我连接的 linux 机器上的用户名。
删除该目录解决了问题。

关于python - 具有 security.UserGroupInformation : PriviledgedActionException (no such file or directory) 的 map-reduce 作业的 Hadoop 错误，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/21213481/

28

4

0

文章推荐： python - Flask WTForms 表单未提交但未输出验证错误

文章推荐： iphone - xcode 在 iOS 设备之间共享数据

文章推荐： python - 在 Python 中完全禁用/替换 ZeroDivisionError

文章推荐： python - 将 python 字典转换为 JavaScript 对象字面量

spring-security - 从 spring-security.xml 文件禁用 Spring Security
请帮助我的建议。我需要通过 xml 文件中的某个变量在我的应用程序上禁用/启用 spring 安全性。我的 spring-security.xml 文件
java - 无法在 Spring Security 中使用 @Secured Method Security 注释
我做了很多研究，对我来说一切看起来都是正确的......但我无法让它发挥作用!有人有什么想法吗？无论我做什么，相关映射仍然对任何人公开(匿名或登录，无论他们具有什么角色)。理想情况下，我希望所有请
security - 如何避免浏览器中出现 "This page contains both secure and non secure items"警告？
我们正在考虑为我们网站的一部分启用 SSL，但某些页面包含来自第三方供应商(如 Google AdSense)的广告。我认为这会给我们的用户带来一个恼人的问题，因为他们在查看带有广告的页面时会看到类
spring-security - 社交登录，spring-security-oauth2 和 spring-security-jwt？
我正在开发一个休息服务，它将通过浏览器提供浏览器单页应用程序和移动应用程序。目前我的服务正在运行根本没有 Spring 。 oauth2 客户端是在过滤器内部实现的，所以可以说是“手动”。我正在
security - Content-Security-Policy 和 Content-Security-Policy-Report-Only 头可以共存而不相互干扰吗
我正在为我公司的网站添加 Content-Security-Policy-Report-Only 标题。在我研究它时，我发现一些页面已经设置了 Content-Security-Policy head
Spring:注解等价于 security:authentication-manager 和 security:global-method-security
在 XML 配置中，我可以使用 security 命名空间来启用对安全性的支持，例如: 我尝试使用没有 XML 的 Spring，只有 @Configuration 类。与上述 XM
security - 如何在Spring Security 3中为匿名用户从数据库加载角色？
我正在使用 Spring Security 3.0.2，但找不到从数据库加载匿名用户角色的方法(我有动态角色，可以将角色分配给每个人)。我尝试使用自定义的anonymousAuthenticatio
security - 许多重定向登录 security.yml
我有那个代码。但是当我在浏览器中进入 app_dev.php/login浏览器说:该页面进行了太多重定向安全.yml安全: 编码器: Symfony\Component\Security\Core\
security - 如何记录SSH Secure Shell客户端的所有即将到来的消息？
我正在使用SSH Secure Shell客户端，这是一个连接服务器的好工具。但是，我想知道是否可以记录通过SSH Secure Shell客户端运行的程序中所有即将出现的消息。例如:./ test
security - 许多重定向登录 security.yml
我有那个代码。但是当我在浏览器中进入 app_dev.php/login浏览器说:该页面进行了太多重定向安全.yml安全: 编码器: Symfony\Component\Security\Core\
security - Silex Security success_handler
如何为表单例份验证提供程序设置 success_handler(和 failure_handler)？ Silex 使用此配置忽略我: register(new Silex\Provider\Secu
spring-security - Spring Security 预认证账户锁校验
新手问题...我已成功实现自定义处理程序和服务(自定义用户详细信息服务、身份验证成功、身份验证失败)并且一切正常。我现在还实现了如果 3 次并发身份验证失败将锁定帐户(一定时间)的功能。我现在继续处
spring-security - Spring Security 多个注销网址？
我正在使用 Spring security java 配置，我想知道一种实现多个 url 注销的方法。即 logout().logoutRequestMatcher(new AntPathReques
spring-security - Spring Security SAML扩展如何处理认证后的后续请求？
我正在为我的 SP 使用 Spring Security SAML 扩展。用户通过 IDP 身份验证后，SP 使用某种方法允许后续调用不必通过 IDP 重新进行身份验证。这是如何在 Spring Se
spring-security - Spring Security 注销返回按钮
spring security 有没有办法防止下面的最后一点？我正在使用 3.0.5 - 用户登录我的网站 - 用户转到网站中的任何页面并单击注销 -注销链接使用户 session 无效并将它们发送到
security - System.Web.Security 不存在于程序集中
要么我迟到了，要么我做错了什么。我正在使用 Visual Studio 2013，但是我试图使用 Membership 类，using System.Web.Security;我的程序集中不存在命名空
spring-security - Spring Security OAuth2重定向循环
我有一个具有依赖性的oauth2客户端spring-boot应用程序: - Spring 靴1.2.0.RC1 -spring-security-oauth2 2.0.4.RELEASE - Spri
security - 控制台应用程序中的 System.Web.Security
我想在控制台应用程序中生成 HashPasswordForStoringInConfigFile。它是在 Web 应用程序中使用以下类完成的 System.Web.Security.FormsAut
spring-security - Spring Security 中的多个预认证过滤器？
我需要有多个 PRE_AUTH Spring 安全过滤器。特别是我需要使用 PRE_AUTH除了配置为 PRE_AUTH 的两个过滤器之外的过滤器在 Spring Security 3.0 的 SAM
spring-security - Spring Security - 自定义预授权注释？
我猜这里没有答案，但我想知道是否有办法创建这样的自定义注释: @Documented @Inherited @Retention(RetentionPolicy.RUNTIME) @Target({E

首页

博学

6Ren·AI

商城

python - 具有 security.UserGroupInformation : PriviledgedActionException (no such file or directory) 的 map-reduce 作业的 Hadoop 错误