Sqoop:--as-parquetfile不起作用

时间:2018-08-28 18:51:36

标签: hadoop sqoop sqoop2

我想将sqoop文件作为拼音文件直接保存到hdfs。我正在尝试按照命令执行此操作。但面对[[0.00,0.10], [3.00,0.10], [6.00,0.10], [9.00,0.10], [12.00,662.00], [15.00,1186.00]]

sqoop版本-1.4.7

  

sqoop导入--options文件/home/user/optionsfile.txt --query“选择   *从\ $ CONDITIONS“表中--target-dir'hdfs:/// user / x / sqoop1'--as-parquetfile -m 1;

当我尝试执行没有ERROR sqoop.Sqoop: Got exception running Sqoop: java.lang.NullPointerException作业的相同sqoop命令时,便会成功

2 个答案:

答案 0 :(得分:1)

您可以尝试使用--table而不是--query进行检查吗?

此问题有一个未解决的错误SQOOP-2571。

答案 1 :(得分:1)

由于这是sqoop中的一个未解决的错误,我建议您建议首先将数据以文本格式导入到临时配置单元表中,然后再插入以Parquete格式配置的另一个配置单元表中。