亚马逊EMR上的工作链？

Question

我需要做2个链式M / R作业，所以我需要使用第一个作业的输出作为第二个作业的输入。

我如何在EMR上实现这一目标？

Answer 1

您可以添加多个作业作为步骤。并使用S3来存储中间结果。第二个mapreduce作业可以从S3读取中间结果并继续完成工作。