使用Apache.Spark管理任务是否合适?

时间:2015-04-12 22:48:05

标签: python apache-spark scheduled-tasks task

我开发了新的python应用程序。它由两部分组成:服务器和工作人员。服务器必须启动任务并管理程序的整个生命周期。工人是应用程序,可以完成一项任务。

我想使用Apache Spark。是管理任务的正确方法吗?如果没有,我应该用什么样的软件来管理任务?

1 个答案:

答案 0 :(得分:2)

我不知道你要做什么,但听起来并不像Apache Spark是正确的选择。它是分布式计算系统,而不是任务管理器。查看它的文档,以便了解它的内容:http://spark.apache.org/docs/latest/quick-start.html