作者热门文章
- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
Yarn显示作业成功(在Yarn UI中),但EMR显示步骤(在EMR控制台UI中)仍在运行,并且永远显示为tat。任何想法 ?
我正在将s3作为json零件文件写入,并且在驱动程序日志中看到了这一点:
Caused by: java.io.IOException: File already exists:s3n:
最佳答案
我遇到了同样的问题,s3告诉我该文件已经存在,并且工作按预期完成。首先,不要使用s3n://
,而应按照this issue的建议使用s3://
。
为了摆脱IOException
,我启用了EMRFS consistent view,这对于“使用Amazon S3作为数据存储来运行快速顺序步骤的集群”是我的建议。 YMMV。
关于hadoop - yarn 显示作业已成功,但EMR显示该步骤仍在运行,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/48730292/
我是一名优秀的程序员,十分优秀!