PIG中的针迹功能

时间:2015-01-06 07:03:38

标签: apache-pig

以下PIG代码无效:

grunt> Register /usr/lib/pig/lib/piggybank.jar ;                  
grunt> define Stitch org.apache.pig.piggybank.evaluation.Stitch();
grunt> data = load 'a' using PigStorage('|') ;                    
grunt> B = Stitch(data,data);                                     

错误: -

2015-01-06 12:03:57,730 [main] ERROR org.apache.pig.tools.grunt.Grunt - 
ERROR 1200: <line 12> Cannot expand macro 'Stitch'. 
Reason: Macro must be defined before expansion.
Details at logfile: /home/hduser/nikhil/pig_1420524859398.log

有人可以解释这里出了什么问题。

1 个答案:

答案 0 :(得分:6)

您的代码中有两个问题 1.您无法直接将stitch命令的输出分配给任何关系。它应该作为FOREACH stmt。的一部分进行预测 2. Stitch命令将only bags作为输入参数,但您传递的是整个关系。

您可以修复上述两个问题并重试您的脚本。

示例示例:

<强>输入

{(a,b),(e,f)}   {(c,d),(g,h)}

<强> PigScript:

grunt> REGISTER /tmp/piggybank.jar;
grunt> DEFINE MyStitch org.apache.pig.piggybank.evaluation.Stitch;
grunt> A = LOAD 'input' USING PigStorage() AS (B1:{T:(t1:chararray,t2:chararray)},B2:{T1:(t3:chararray,t4:chararray)});
grunt> B = FOREACH A GENERATE MyStitch(B1,B2);
grunt> DUMP B;

<强>输出:

({(a,b,c,d),(e,f,g,h)})

<强>参考:
http://pig.apache.org/docs/r0.13.0/api/org/apache/pig/piggybank/evaluation/Stitch.html