我在Eclipse中使用远程调试HDFS源代码,但是每次修改源代码时都必须部署jar文件是非常不方便的。 有没有办法快速开发,编译,部署HDFS源代码? 我需要你所有的帮助! THX!
答案 0 :(得分:0)
虽然它是由我自己制作的,但我通常使用docker-hadoop-cluster进行开发。
唯一的要求是Docker。此框架将您的HDFS代码部署到笔记本电脑上的多节点HDFS集群。除HDFS外,它还推出了YARN集群。
$ git clone https://github.com/Lewuathe/docker-hadoop-cluster.git
$ cd docker-hadoop-cluster
# Copy your self build Hadoop source code
$ cp /path/to/hadoop-3.0.0-alpha2-SNAPSHOT.tar.gz hadoop-base
$ make
$ make run
如果您有任何问题,请通过issue告诉我。
由于