使用Sqoop导入的动态分区

时间:2015-08-08 19:53:35

标签: hadoop sqoop hcatalog

从sqoop文档中,它说Sqoop可用于通过动态分区将数据导入Hive。但是找不到任何示例。有人试过吗。

Sqoop HCatalog功能支持以下表格类型:

  1. 未分区的表格
  2. 指定了静态分区键的分区表
  3. 带有来自数据库结果集的动态分区键的分区表
  4. 包含静态密钥和其他动态分区键的分区表
  5. 我正在寻找选项#3。

    先谢谢。

1 个答案:

答案 0 :(得分:0)

我猜Sqoop文档是滞后的。在Hadoop生态系统中,通常会在版本X中引入功能并在版本X + 1中进行记录。

另一方面,它是暴露在Sqoop中的HCatalog功能,那么为什么不检查条目“Dynamic Partitioning”下的HCatalog文档?
; - )