如何以编程方式将数据加载到HDFS(本地HDInsight)?

时间:2013-07-08 10:50:22

标签: c# hadoop hdfs hdinsight

有没有办法使用c#以编程方式将数据加载到本地HDFS群集中?

我找到了一个关于使用SDK使用C#代码将数据加载到Azure的教程,但它需要blob存储,而不是本地群集。任何解决方法?

我知道可以使用Javascript控制台或通过Hadoop命令行加载数据,但我特别希望通过代码实现此目的。

我浏览了一些论坛,发现Hive连接现在要求您拥有一个Azure存储帐户,无论您是否使用HDInsight Azure服务。这是将数据加载到HDFS的情况吗?

任何指针都会有所帮助。

谢谢!

1 个答案:

答案 0 :(得分:0)

是的,有可能。为HDFS文件系统操作提供了一个用于HDInsight的C库。有关详细信息,请参阅此link;有关工作示例,请参阅此post

希望这有帮助。