Question

我编写了一个有意读取JSON数据的mapper程序。代码如下所示：

public void map(LongWritable key, Text value, Context context)
        throws IOException, InterruptedException {
    System.out.println("Into Map");
    try {
        String line = value.toString();
        JSONParser jsonParser = new JSONParser();
        JSONObject jsonObject = new JSONObject();
        jsonObject = (JSONObject) jsonParser.parse(line);
        String content = (String) jsonObject.get("content");
        System.out.println(content);
        StringTokenizer tokenizer = new StringTokenizer(content);
        while (tokenizer.hasMoreTokens()) {
            word.set(tokenizer.nextToken());
            String strword = word.toString();
                context.write(word, one);
        }
    } catch (ParseException ex) {
        ex.printStackTrace();
    }
}

然而，当我尝试运行映射器时我收到以下错误：

Error: java.lang.ClassNotFoundException: org.json.simple.parser.ParseException
    at java.net.URLClassLoader$1.run(URLClassLoader.java:202)
    at java.security.AccessController.doPrivileged(Native Method)
    at java.net.URLClassLoader.findClass(URLClassLoader.java:190)
    at java.lang.ClassLoader.loadClass(ClassLoader.java:306)
    at sun.misc.Launcher$AppClassLoader.loadClass(Launcher.java:301)
    at java.lang.ClassLoader.loadClass(ClassLoader.java:247)
    at java.lang.Class.forName0(Native Method)
    at java.lang.Class.forName(Class.java:249)
    at org.apache.hadoop.conf.Configuration.getClassByName(Configuration.java:810)
    at org.apache.hadoop.conf.Configuration.getClass(Configuration.java:855)
    at org.apache.hadoop.mapreduce.JobContext.getMapperClass(JobContext.java:199)
    at org.apache.hadoop.mapred.MapTask.runNewMapper(MapTask.java:718)
    at org.apache.hadoop.mapred.MapTask.run(MapTask.java:364)
    at org.apache.hadoop.mapred.Child$4.run(Child.java:255)
    at java.security.AccessController.doPrivileged(Native Method)
    at javax.security.auth.Subject.doAs(Subject.java:396)
    at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1190)
    at org.apache.hadoop.mapred.Child.main(Child.java:249)

有人可以指出我做错了吗？

Answer 1

这是一个微不足道的错误。我没有将jar放在hadoop / lib文件夹中。我只把它们放在日食工作区。

P.S。我第一次删除了这篇文章但后来我看到其他人在另一个论坛上提出了类似的问题。因此我取消了这个问题并回答了问题。我也编辑了这个问题，以突出实际原因。

Answer 2

我也费了很大劲才解决这个问题。即使我添加了一个 jar 文件来构建路径以及类路径，该程序也无法运行。对我有用的是将 jar 文件添加到运行配置--> 依赖项--> 类路径条目

读取JSON对象作为mapper的输入值时获取“java.lang.ClassNotFoundException：org.json.simple.parser.ParseException”

2 个答案: