每小时在Spark Job服务器中安排自动Spark作业

Question

在DataStax Enterprise Edition 4.8中，Spark Jobserver 0.5.2已针对受支持的Apache Spark 1.4.1.1版本进行了专门编译。 Spark工作将从Cassandra读取数据并将汇总数据写入同一个Keyspace中的另一个表中。

Spark Job服务器中是否有任何功能可以安排作业在每小时后自动运行？

Answer 1

不幸的是，Spark Jobserver目前没有任何安排工作的功能。

也许你可以在linux上使用cron任务自动运行curl命令向Jobserver发送请求。