我的应用程序是通过本指南中的Kerberos keytab和Principal通过spark-submit以纱线群集模式从远程PC启动的:https://spark.apache.org/docs/latest/running-on-yarn.html。这种方法的优点是我在任何集群中拥有自己的火花版本。
是否可以通过运行带有HADOOP_CONF_DIR / YARN_CONF_DIR配置的bash脚本,自动部署Ignite / Hazelcast / Accumulo / Kudu或其他NoSQL数据库,无需sftp / ssh即可在读/写中随机访问Hadoop YARN集群?< / p>
答案 0 :(得分:0)
Deploying Hazelcast on a YARN cluster is possible and easy, take a look at https://github.com/hazelcast/hazelcast-yarn