自适应负载均衡与gnu并行

时间:2015-06-09 02:44:44

标签: google-compute-engine gnu-parallel

有没有办法用动态更改的远程主机列表运行gnu并行?动态不是间歇性的或不规则的 - 我正在寻找一种方法来使用Google计算引擎自动缩放功能平滑扩展到最大数量的主机,并在这些主机活跃时拥有gnu并行调度作业。我想我可以创建一个虚假的工作来触发自动扩展以启动多个主机并让他们自己注册到一些中央主机文件。任何想法如何最好地管理这个?

1 个答案:

答案 0 :(得分:2)

来自man parallel

   --slf filename
            File with sshlogins. The file consists of sshlogins on
            separate lines.
            : 
            If the sshloginfile is changed it will be re-read when a
            job finishes though at most once per second. This makes it
            possible to add and remove hosts while running.