标签： pyspark jenkins-pipeline pyspark-sql control-m
我有pyspark作业，还有一些用于数据集预处理的python脚本，然后运行pyspark作业。
只是想知道是否有用于PYSPARK作业工作流程的最佳工具？ control-m和/或Jenkins是否可以做到这一点？