我刚开始学习猪并尝试用它做一些事情,所以我进入猪控制台,只需输入a = load 'sample_data.csv';
(我有一个名为sample_data.csv
的文件)。我收到以下例外:
Pig Stack Trace
---------------
ERROR 2998: Unhandled internal error. name
java.lang.NoSuchFieldError: name
at org.apache.pig.parser.QueryParserStringStream.<init>(QueryParserStringStream.java:32)
at org.apache.pig.parser.QueryParserDriver.tokenize(QueryParserDriver.java:207)
at org.apache.pig.parser.QueryParserDriver.parse(QueryParserDriver.java:175)
at org.apache.pig.PigServer$Graph.validateQuery(PigServer.java:1571)
at org.apache.pig.PigServer$Graph.registerQuery(PigServer.java:1544)
at org.apache.pig.PigServer.registerQuery(PigServer.java:516)
at org.apache.pig.tools.grunt.GruntParser.processPig(GruntParser.java:991)
at org.apache.pig.tools.pigscript.parser.PigScriptParser.parse(PigScriptParser.java:412)
at org.apache.pig.tools.grunt.GruntParser.parseStopOnError(GruntParser.java:194)
at org.apache.pig.tools.grunt.GruntParser.parseStopOnError(GruntParser.java:170)
at org.apache.pig.tools.grunt.Grunt.run(Grunt.java:69)
at org.apache.pig.Main.run(Main.java:538)
at org.apache.pig.Main.main(Main.java:157)
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:39)
at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:25)
at java.lang.reflect.Method.invoke(Method.java:597)
at org.apache.hadoop.util.RunJar.main(RunJar.java:156)
================================================================================
sample_data.csv
的内容是:
1, John, Smith
2, Jane, Doe
3, George, Washington
4, Ben, Franklin
我还将$PIG_HOME
变量设置为pig目录的主文件夹。
我也知道之前提出的类似问题。 here
但是,即使我按照指示设置了$PIG_CLASSPATH
变量,并echo
编辑了$PIG_CLASSPATH
以确保设置正确,我仍然会收到同样的错误。
答案 0 :(得分:1)
抓了我的头24小时。我终于在我的同事的帮助下弄明白了。
这是Hive
的结果。出于某种原因,当Pig
和Hive
都设置在同一台机器上时,这往往会发生。所以我需要做的就是
export HIVE_HOME=