集群配置中的DSE Analytics

时间:2018-08-09 06:17:58

标签: apache-spark cassandra datastax datastax-enterprise spark-cassandra-connector

以前,我们有三个节点群集,一个DC中有两个Cassandra节点数据中心,而另一个DC中有一个启用火花的节点。 在该配置中,Spark运行平稳。 然后,我们尝试在启用火花的Analytics DC中添加另一个节点。我们已经配置了GossipingPropertyFileSnitch以及添加的种子。 但是现在,当我们启动集群时,将火花主分别分配给两个节点。因此,火花作业仍在单个节点上运行。关于在集群中运行Spark作业,我们缺少哪些配置?

1 个答案:

答案 0 :(得分:0)

很可能您没有在Analytics(分析)键空间复制中进行调整,或者在添加节点后没有运行修复。请参阅instructions in official documentation

此外,请检查您是否为两个Analytics(分析)节点配置了相同的DC,因为Spark主设备是按DC选择的。