我可以在Azure虚拟机上执行类似Azure HdInsight的设置吗?

时间:2019-07-19 06:14:29

标签: azure azure-virtual-machine hdinsight azure-virtual-network

我想在Azure VM上安装Azure HDInsight之类的设置,并且必须在其中安装和配置Hadoop以维护整个Hadoop和Spark生态系统,最重要的是,我只能为虚拟机付费,而不能为虚拟机付费对于我已安装的软件,我应该获得与HDInsight相同的性能。

2 个答案:

答案 0 :(得分:1)

由于HDinsight基于Hortonworks HDP,因此您可以通过在VM上安装HDP沙箱之类的东西来进入一个相当相似的系统:https://www.cloudera.com/downloads/hortonworks-sandbox.html

通常:通常,您总是可以只配置VM,并在其中安装您选择的整个Hadoop发行版,这使您具有在其中进行和配置任何内容的完全自由。如果要获得与HDinsight相同的性能,则很大程度上取决于您能否正确配置和扩展Hadoop集群。

答案 1 :(得分:0)

我可以在Azure虚拟机上执行类似Azure HDInsight的设置吗?

是的,您可以在Azure虚拟机上进行类似Azure HDInsight的设置。

注意: Azure HDInsight构建在Hortonworks Data平台之上

您有四个不同的选项来部署Hadoop。

1。 Azure HDInsights(基于HDP)

Azure HDInsight是面向企业的托管式全频谱开源分析服务。 HDInsight是一种云服务,可轻松,快速且经济高效地处理大量数据。 HDInsight还支持广泛的场景,例如提取,转换和加载(ETL)。数据仓库;机器学习和物联网。

2。 HDP即服务在Azure市场中

Azure云基础结构因其灵活性,易于部署和成本优势而成为用户在云上部署虚拟机的常见场所。 Microsoft已将Azure扩展到一个包含数千个针对Microsoft Azure预先配置的认证,开源和社区软件应用程序和开发人员服务的市场。本教程介绍如何通过Azure市场部署Hortonworks Sandbox产品。

有关如何在Azure上部署Hortonworks Sandbox的逐步指南,请访问:Deploying Hortonworks Sandbox on Microsoft Azure

3。在裸机上部署HDP

沙箱提供了一个本地开发环境,以了解Hadoop,Hadoop分布式文件系统(HDFS)和作业提交。

有关Get started with an Apache Hadoop Sandbox, an emulator on a Virtual Machine的逐步指南。

4。创建Linux VM并手动安装Hadoop生态系统

您可以在运行linux的Azure虚拟机上设置Hadoop生态系统。 有关如何在Azure VM上安装Hadoop的分步指南。

希望这会有所帮助。