使用Apache YARN在Spring Cloud Dataflow上部署失败

Question

我已经使用Kafka-Zookeeper和Spring Cloud Dataflow 1.0.3安装了单节点Apache YARN。

一切正常，但是当我做了一些部署示例时，例如：

stream create --name“ticktock”--definition“time | hdfs --rollover = 100”--deploy

http --port = 8000 | log --name = logtest --level = INFO

流的状态永远不会停留在“已部署”状态。它不断改变“未部署” - ＆gt;“parcial” - ＆gt;“部署”在一个恒定循环中。

然而，YARN应用程序成功部署，但它就像Spring Cloud Dataflow服务器实例和Apache Hadoop之间的通信一样，它经常失败。

这可能是什么问题？

提前致谢！

Answer 1

嗯，这里没有很多信息，但您可能需要检查并确保在HDFS中创建了必要的基本目录，并且您的Yarn用户具有对它的读/写权限

spring.cloud.deployer.yarn.app.baseDir = /数据流

Answer 2

感谢所有人的回答！忙于其他高优先级项目，但我能够使用Ambari构建所有项目（包括Sabby Adannan提到的插件）。现在一切都很好！。