具有远程部署的Hadoop Key-Value存储

时间:2017-12-13 14:34:57

标签: hadoop yarn hazelcast ignite apache-kudu

我的应用程序是通过本指南中的Kerberos keytab和Principal通过spark-submit以纱线群集模式从远程PC启动的:https://spark.apache.org/docs/latest/running-on-yarn.html。这种方法的优点是我在任何集群中拥有自己的火花版本。

是否可以通过运行带有HADOOP_CONF_DIR / YARN_CONF_DIR配置的bash脚本,自动部署Ignite / Hazelcast / Accumulo / Kudu或其他NoSQL数据库,无需sftp / ssh即可在读/写中随机访问Hadoop YARN集群?< / p>

1 个答案:

答案 0 :(得分:0)

Deploying Hazelcast on a YARN cluster is possible and easy, take a look at https://github.com/hazelcast/hazelcast-yarn