将大型csv文件导入Cassandra的最有效方法

时间:2018-05-03 08:34:22

标签: csv import cassandra

我有12个CSV文件(总共约36 GB),我需要加载到Cassandra中。目前我正在运行一项工作来将CSV文件解析为一个对象,然后在Cassandra上逐行插入执行并且它将永远(xx小时 - 这可能也是现实),但也许有人知道一种更有效的方法吗?

谢谢你的陪练。

1 个答案:

答案 0 :(得分:0)

您可以使用Cassandra BulkLoader。有关如何执行加载的详细信息,请参见https://www.datastax.com/dev/blog/using-the-cassandra-bulk-loader-updated