有没有类似于hadoop纱线的框架

Question

我想知道，还有其他任何已经存在的框架，例如Hadoop Yarn，用于管理集群应用程序和重新构建资源吗？

我觉得YARN解决了一个普遍问题，我一直在寻找为什么没有任何其他框架尝试过这样做。

我用Google搜索但没有找到类似于Hadoop Yarn的内容。 是否有类似于YARN的东西？

Answer 1

有许多资源配置和调度程序。仅举几例，有HTCondor，SLURM，PBS，LSF，SGE（或变体）。每个人都需要一份工作或多份工作，并在一组分布的工作节点上安排工作。每个人都有自己的优点和缺点。有些是免费的，例如HTCondor，Slurm和扭矩。一些成本，例如LSF和SGE（虽然存在免费版本，对于SGE）。这一切都取决于你的需求。

FWIW，启发Hadoop的原始Google paper引用了HTCondor，因此您可能有兴趣尝试一下。