气流达标中两个任务之间的数据共享

Question

我想使用HiveOperator进行配置单元查询，并且该查询的输出应使用PythonOperator传输到python脚本。有可能吗？

Answer 1

解决此类问题的一种方法通常是使用Airflow的xcoms-请参见documentation

但是，我仅在严格必要的情况下才谨慎使用。否则，您可能会陷入纠结和相互依存的局面。