并行的不同模式的Sqooping相同的表是失败的

时间:2013-10-22 09:44:08

标签: sqoop

我们在Oracle中使用不同的数据库模式。我们计划将一些桌子从oracle到Hive仓库。但是如果我们把sqooping的oltp表顺序排列就可以了。但为了更好地使用我们计划sqoop不同的oltps表parallay,但它是sqoop相同的表parallay。

似乎在sqooping一个表时,一个临时表将在hdfs中由sqoop创建,并从那里将数据移动到hive表,因为这个原因我们无法sqoop parallay。

我们是否有任何方法可以将相同的表格用于parallay。

1 个答案:

答案 0 :(得分:0)

您可以使用参数--target-dir在HDFS上指定任意临时目录,Sqoop将首先导入数据。此参数应与--hive-import配合使用。