这种cassandra数据迁移实用程序设计有效吗?

时间:2018-10-24 13:35:33

标签: apache-spark cassandra datastax spark-cassandra-connector

我正在编写一个实用程序,用于将现有的Oracle Prod数据迁移到项目特定模块的cassandra中。

为此,我正在使用spark-sql,datastax cassandra连接器,apache cassandra。

我正在执行以下步骤:

  • 从oracle读取表并获取数据框。
  • 我正在提取到Cassandra表中的数据框。

我正在使用spark-sql v2.3.1 即我正在使用spark.read.format("jdbc")...来读取数据。 和dataframe.write.option("datastax.cassandra")....等。

我需要使用此工具进行生产数据库迁移。 您是否发现此设计有任何问题? 我还需要照顾更多吗? 请给我建议设计...

0 个答案:

没有答案