如何在Azure HDInsight的Spark Cluster中配置HBase?

时间:2017-04-18 07:27:04

标签: azure hadoop apache-spark hortonworks-data-platform hdinsight

我在Azure中创建了HDInsight的Spark集群。现在我想将已处理的数据存储到HBASE中,我不想创建单独的HBASE HDInsight群集并使用VNET连接到Spark群集。

这是因为我们每个区域限制了60个核心(例如,东美2)。我已经并希望将所有60个内核用于我的Spark Cluster。因此想到在HDInsight的spark群集中安装HBASE。

在HDInsight Spark Cluster中创建时,似乎已经有一个HBASE实例正在运行。但这并未在Azure的Cluster Dashboard(Ambari)或其任何配置中显示。

我不确定它是否正常工作。当我做了“hbase shell”时,我得到了如下所示的错误。

HBASE Error on "hbase shell" in Spark HDInsight Cluster

那么如何在Spark HDInsight群集中进行正确的hbase安装并进行配置呢?并且可以这样做吗?

1 个答案:

答案 0 :(得分:1)

这不是HDInsight中支持的方案。我们将HBase作为单独支持的群集类型。您可以通过从Azure管理门户提升支持服务单来增加配额。