如何快速开发,编译,部署HDFS源代码以便我可以调试?

时间:2016-11-28 12:42:46

标签: hadoop hdfs

我在Eclipse中使用远程调试HDFS源代码,但是每次修改源代码时都必须部署jar文件是非常不方便的。 有没有办法快速开发,编译,部署HDFS源代码? 我需要你所有的帮助! THX!

1 个答案:

答案 0 :(得分:0)

虽然它是由我自己制作的,但我通常使用docker-hadoop-cluster进行开发。

唯一的要求是Docker。此框架将您的HDFS代码部署到笔记本电脑上的多节点HDFS集群。除HDFS外,它还推出了YARN集群。

$ git clone https://github.com/Lewuathe/docker-hadoop-cluster.git
$ cd docker-hadoop-cluster
# Copy your self build Hadoop source code
$ cp /path/to/hadoop-3.0.0-alpha2-SNAPSHOT.tar.gz hadoop-base
$ make
$ make run

如果您有任何问题,请通过issue告诉我。

由于

相关问题