调度EMR集群

时间:2014-03-21 16:59:43

标签: amazon-web-services hive amazon-emr amazon-data-pipeline

我已经使用HIVE和PIG构建和存储了我想安排每周运行的查询。脚本创建S3文件并更新DynamoTables。我可以使用什么来创建AmazonEMR群集以按计划自动运行这些脚本。

我在想AWS数据管道,但它似乎需要创建数据节点,我认为这不是我的目的所必需的。

1 个答案:

答案 0 :(得分:0)

如果禁用HiveActivity上的暂存,则无需指定数据节点。

  

stage = false

请参阅the example in this post