AWS数据管道触发AWS胶搜寻器

Question

我有一个带有EMR活动的AWS数据管道，该管道在S3上写入数据。在此过程结束时，它还将一些元数据写入该位置的特定S3文件夹中。

是否有一种方法可以从数据管道定义中触发Aws Glue搜寻器-扫描最后一个S3位置，从而创建Aws Athena表？

在Aws Data Pipelines文档中，我还没有找到执行此操作的方法。

Answer 1

也许您可以使用ShellCommandActivity并致电aws glue start-crawler。