hadoop - 使用Apache YARN在Spring Cloud Dataflow上部署失败

Question

我已经使用Kafka-Zookeeper和Spring Cloud Dataflow 1.0.3安装了单节点Apache YARN。

一切工作正常，但是当我制作一些部署示例时，例如:

流创建--name“ticktock”-定义“time | hdfs --rollover = 100” --deploy

http --port = 8000 | log --name = logtest --level = INFO

流的状态永远不会保持在“已部署”状态。它不断以“循环”方式更改“未部署”->“局部”->“已部署”。

但是，YARN应用程序已成功部署，但是就像Spring Cloud Dataflow服务器实例和Apache Hadoop之间的通信一样，它一直在失败。

这可能是什么问题？

提前致谢!

Answer 1

很好，这里没有很多信息，但是您可能需要检查并确保在HDFS中创建了必要的基本目录，并且您的Yarn用户对其具有读/写权限。

spring.cloud.deployer.yarn.app.baseDir = /数据流