Apache Pig:轻量级Java客户端

时间:2014-04-03 14:08:46

标签: java maven hadoop apache-pig

Apache Pig是否有轻量级Java客户端? Maven中基本上只有一个工件org.apache.pig:pig:0.10.1,这是一个非常大的jar(3 MB),具有大量的传递依赖。这不适用于我们。我们只需要与Hadoop集群交谈即可定期提交Pig作业。是工具吗?

1 个答案:

答案 0 :(得分:0)

您可以从java访问PigServer类来启动Pig作业。见Run pig in java without embedding pig script。至于maven,你可以exclude the dependencies来减少罐子的最终尺寸。