我有一个场景,我将数据从hive复制到db2。我可以通过两种方式实现这一点。一个是使用sqoop export命令,另一个是db2加载客户端。我需要知道在性能方面哪种方法最好。请给我一些建议。
答案 0 :(得分:0)
Sqoop可用于将HDFS中的大型数据文件(使用映射器)同时传输到db2。我不知道db2 load client。
答案 1 :(得分:0)
取决于..如果使用DB2 LUW,使用sqoop连接器可以更快,具体取决于您可用的群集数量(映射器)。 DB2 Load(至少在z世界中)可以进行并行加载,因此根据数据库系统上的cp数量,可能会更快。所以我想这取决于你的环境(数据库系统和hadoop集群)。