gpt4 book ai didi

hadoop - ResourceManager 启动后在引导脚本中运行操作

转载 作者:可可西里 更新时间:2023-11-01 15:33:46 26 4
gpt4 key购买 nike

我正在使用 amazon aws cli 工具启动 AWS EMR 集群。我有一个在 master 上运行的 boostrap 操作并运行以下命令

    hdfs dfs -put /home/hadoop/X.tar.gz /

但是我得到以下错误

    put: Call From X.internal/X1 to X.internal:9000 failed on connection exception: java.net.ConnectException: Connection refused; For more details see:  http://wiki.apache.org/hadoop/ConnectionRefused

但是,一旦集群启动(这个错误不会导致启动失败),我可以成功运行上面的命令。

如何在引导脚本中运行 hdfs 命令?

最佳答案

将其作为步骤而不是 Action 来运行。请参阅此处的示例:http://docs.aws.amazon.com/ElasticMapReduce/latest/DeveloperGuide/emr-hadoop-script.html

关于hadoop - ResourceManager 启动后在引导脚本中运行操作,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/28728672/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com