在pig脚本中顺序或并行加载操作?

时间:2015-12-02 20:27:18

标签: apache-pig

我在pig脚本中有2个加载语句,如下所示:

a =使用HCatLoader();

加载'file1.dat'

b =使用HcatLoader();

加载'file2.dat'

在这之后,我分别对a和b进行了一些转换。如果我们以批处理模式运行这个pig脚本,那么两个文件的加载和转换是按顺序还是并行发生的?我以为猪会优化这个脚本并同时运行两个负载。但不是100%肯定。有人可以对此发表评论吗?

1 个答案:

答案 0 :(得分:0)

每个加载命令将并行运行,但pig脚本中的命令将以串行方式运行。