hadoop - Cloudera Docker不断尝试重新连接到8032

Question

我使用了cloudera的docker镜像，但似乎配置不正确。因为我这样做:

hadoop jar /usr/lib/hadoop*/contrib/streaming/hadoop-streaming*cdh*.jar \
  -mapper mapper -reducer reducer \
  -file mapper -file reducer \
  -input input -output output

我一直都这样:

18/03/14 02:34:33 INFO ipc.Client: Retrying connect to server: 0.0.0.0/0.0.0.0:8032. Already tried 9 time(s); retry policy is RetryUpToMaximumCountWithFixedSleep(maxRetries=10, sleepTime=1000 MILLISECONDS)

这是我在运行上述过程之前所做的。

将Docker内存增加到8GB

通过在主机

中运行容器来启动容器

docker run -p 7180:7180 \
  --hostname=quickstart.cloudera --privileged=true \
  -t -i cloudera/quickstart:latest \
  /usr/bin/docker-quickstart

启动经理
/ home / cloudera / cloudera-manager --express

打开cloudera管理器以启动HDFS

将样本输入上传到HDFS

Answer 1

您不仅需要使用管理器来启动HDFS，还需要使用YARN