巨大的插入,没有更新,适度读取数十亿行数据存储

时间:2016-10-13 11:31:30

标签: datastore nosql

我们的系统每天需要1000万次插入(结构数据),存储时间长达3个月(最多可添加3亿条记录,之后我们可以清除旧记录),无需更新,并且应支持简单查询(就像按日期排序的某些特定列上的查询一样)。哪种数据存储解决方案对这种情况有效?我们认为RDBMS对于数十亿条记录来说会很慢。

1 个答案:

答案 0 :(得分:0)

如果您可以优化插入方式,MySql可能会有效。 http://dev.mysql.com/doc/refman/5.7/en/optimizing-innodb-bulk-data-loading.html

当然,这取决于你的1M插入物是均匀分布还是你有选择。

如果您选择身高很高的TPS,我会推荐aerospike

MongoDb也可以使用,但是您需要使用分片。