Question

在sqoop作业提交中收到错误。

sqoop:000> start job --jid 1
Submission details
Job id: 1
Status: FAILURE_ON_SUBMIT 
Creation date: 2013-11-06 11:21:30 IST
Last update date: 2013-11-06 11:21:30 IST

Exception: java.io.FileNotFoundException: File does not exist: hdfs://master:9000/usr/local/sqoop/server/webapps/sqoop/WEB-INF/lib/sqoop-common-1.99.3.jar

我们是否需要将所有sqoop jar文件放在HDFS上？

我在hadoop 2.2.0的同一主节点上运行sqoop作业

Answer 1

我最后将所有必需的jar库复制到hdfs中并且它有效。

hadoop fs -mkdir -p /usr/local/sqoop/server/webapps/sqoop/WEB-INF/lib/
hadoop fs -copyFromLocal /usr/local/sqoop/server/webapps/sqoop/WEB-INF/lib/*.jar /usr/local/sqoop/server/webapps/sqoop/WEB-INF/lib/

Answer 2

修改mapred-site.xml文件。

<property>
  <name>mapreduce.framework.name</name>
  <value>yarn</value>
</property>

我成功了

sqoop2作业提交时出错

2 个答案: