在HDP 2.4上运行Spark 2

Question

我在HDP 2.4上运行Spark 1.6.1，我想知道我们是否可以在Yarn HDP 2.4群集上运行Spark 2驱动程序？

提前谢谢。

Answer 1

您可以运行SPARK 2.0，但HDP平台不支持它。因为现在SPARK 2.0包含在HDP 2.5中作为技术预览版。有关详细信息，您可以查看官方documentation。