我可以使用AWS Glue将S3上的json数据转换为柱状格式并将其推送到Redshift吗？

Question

我在S3上有嵌套JSON格式的数据，不断更新。我希望数据在转换后定期将此数据推送到Redshift集群。 AWS Glue是否有助于配置将格式转换为柱状并将其推送到Redshift的定期运行？

Answer 1

AWS Glue ETL可以运行Python脚本，以任何方式转换数据。在an example他们通过Relationalize转换展平JSON的地方in_array()。