如何使用Apache SPark迁移数据？

Question

使用apache spark可以更快地为大量数据进行数据迁移吗？ 需要将数据从mySQL迁移到cassandra。如果我们能做到，该怎么做？

Answer 1

使用 Apache Spark 迁移数据的优势是可以并行化操作（至少并行化写入 Cassandra ）。

但是，在您的情况下，由于您正在阅读 MySQL ，我认为这将是迁移的读取瓶颈。您的 MySQL 是分片还是单个实例？