在AWS RDS中插入10亿行的最便宜方式

时间:2016-01-12 08:19:50

标签: amazon-web-services aws-rds

我需要从本地计算机向AWS RDS导入10亿行数据。

本地计算机具有高速互联网连接,最高可达100MB / s。所以,网络不是问题。

我使用AWS RDS r3.xlarge和2000 PIOPS以及300GB存储空间。

然而,由于我的PIOPS卡在2000年,为了进口10亿行,它将需要7天。

如何在不付更多费用的情况下加快流程?

非常感谢。

1 个答案:

答案 0 :(得分:2)

您的PIOPS是数据库实例的基础IO配置 - 也就是说,保证操作系统每秒能够发送到持久存储的数据量。您可以通过使用更大的批量批量(根据数据库支持的内容)稍微优化它,但从根本上它限制了导入的可用字节数/秒。

您可以为导入配置更多IO,然后将其缩小。