我使用starcluster启动了几个EC2实例,并在每个节点上运行相同的管道。
有人可以就这些问题分享一些想法吗?
答案 0 :(得分:0)
我不熟悉starcluster
,但我认为它与Maui调度程序有类似的节点分配策略:
http://docs.adaptivecomputing.com/maui/5.2nodeallocation.php
具体来说,请参阅MINRESOURCE政策:
http://docs.adaptivecomputing.com/maui/5.2nodeallocation.php#MINRESOURCE
5.2.2.5 MINRESOURCE
该算法根据配置的资源优先级节点 在每个节点上。那些配置资源最少的节点 仍然符合工作的资源限制被选中。
这是Maui的默认设置,至少在我完成的安装上,这使得它以您描述的方式提交作业。
我认为starcluster
表现相似。