镶嵌格式的sqoop导入_success无法生成

时间:2017-03-14 11:18:37

标签: hdfs sqoop parquet

我使用sqoop以镶木地板格式导入数据,除了在目标HDFS位置没有生成_SUCCESS文件外,每件事情都可以正常工作。

bin/sqoop import --connect 'jdbc:[conn_string]' --table [table] --target-dir hdfs://hdfs-location/ --as-parquetfile

我需要这个_SUCCESS来创建Oozie包作业

1 个答案:

答案 0 :(得分:0)

成功导入后使用以下文件格式生成

_SUCCESS文件:

  • avrodatafile
  • sequencefile
  • textfile

对于Parquet文件格式,您将首先获得.metadata,并且在成功导入后,您将获得.parquet个文件。