如何将更大的文件上传到azure hadoop集群？

Question

如何将较大的文件上传到azure hadoop群集？

有没有办法通过远程桌面连接浏览到hadoop集群中的/ example / apps目录，以便我可以复制文件？

Answer 1

HDInsight使用Windows Azure Blob存储（WASB）。您可以通过多种方式将数据上传到WASB：

• AzCopy
• Windows Azure PowerShell
• 第三方工具包括Azure Storage Explorer，Cloud Storage Studio 2，CloudXplorer等。
• Hadoop命令行。您必须先启用RDP。

有关详细信息，请参阅http://www.windowsazure.com/en-us/manage/services/hdinsight/howto-upload-data-to-hdinsight/。

Answer 2

通过HTTP / HTTPS将文件复制到Azure Blob存储，然后通过指向上传文件的HTTP URL，从Azuure上的Hadoop（HDInsight）中将它们MapReduce。

干杯