在本地模式下将存档添加到分布式缓存pigServer

时间:2015-10-19 21:32:25

标签: java hadoop apache-pig hadoop2

我正在尝试将存档文件添加到pig中的分布式缓存中,同时使用pigServer在本地模式下运行它。

DistributedCache.addArchiveToClassPath(新路径(新URI(“归档文件路径#symlink”)),conf);

这似乎不起作用。

如何在本地模式下使用pigServer运行时,如何添加存档文件并向pig添加符号链接?

1 个答案:

答案 0 :(得分:0)

在本地模式下运行作业时,不支持分布式缓存。

如果你仔细查看你的日志,它会给你一个警告。

2015-10-05 23:22:56,675 [main] INFO  org.apache.pig.data.SchemaTupleFrontend - Distributed cache not supported or needed in local mode.