将大数据从vertica迁移到redshift的最佳方法是什么?

时间:2013-10-03 12:14:43

标签: amazon-web-services vertica amazon-redshift

我们在AWS上托管了vertica,db的总大小为500GB。 那么将数据从vertica迁移到redshift的最快方法是什么?

一种方法是 1.将vertica数据导出到S3
2.将数据从S3加载到redshift。

有没有更好的方法?

1 个答案:

答案 0 :(得分:2)

有三种方法可以将数据导入redshift:

  1. 从s3
  2. 加载
  3. 从DynamoDB加载
  4. 执行插入查询
  5. 插入查询,即使是批量查询,也受到红移群集的领导节点性能的限制。选项#1和#2更好,因为数据插入是与群集的计算节点并行完成的。

    更新:现在有第4个选项,通过ssh加载:http://docs.aws.amazon.com/redshift/latest/dg/loading-data-from-remote-hosts.html