Subdag未执行且未显示为“成功”

时间:2017-02-06 18:00:13

标签: python airflow

我一直在气流中尝试'example_subdag_operator'。我将'start_date'更改为datetime.now()然后手动触发dag运行。运算符为绿色,但当我放大到子标本身时,没有执行任何操作(图表视图中为白色),“运行”下拉列表为空。 \

我使用从master构建的最新版本。我也测试了pip发布的版本。仍然是同一个问题\

这是一个错误吗?或者我错过了什么?

from datetime import datetime

from airflow.models import DAG
from airflow.operators.dummy_operator import DummyOperator
from airflow.operators.subdag_operator import SubDagOperator

from airflow.example_dags.subdags.subdag import subdag


DAG_NAME = 'example_subdag_operator'

args = {
    'owner': 'airflow',
    'start_date': datetime.now(),
}

dag = DAG(
    dag_id=DAG_NAME,
    default_args=args,
    schedule_interval="@once",
)

start = DummyOperator(
    task_id='start',
    default_args=args,
    dag=dag,
)

section_1 = SubDagOperator(
    task_id='section-1',
    subdag=subdag(DAG_NAME, 'section-1', args),
    default_args=args,
    dag=dag,
)

some_other_task = DummyOperator(
    task_id='some-other-task',
    default_args=args,
    dag=dag,
)

section_2 = SubDagOperator(
    task_id='section-2',
    subdag=subdag(DAG_NAME, 'section-2', args),
    default_args=args,
    dag=dag,
)

end = DummyOperator(
    task_id='end',
    default_args=args,
    dag=dag,
)

start.set_downstream(section_1)
section_1.set_downstream(some_other_task)
some_other_task.set_downstream(section_2)
section_2.set_downstream(end)

subdag operator success

subdag not executed

1 个答案:

答案 0 :(得分:0)

这不是一个错误。建议不要为start_date使用动态值,尤其是 datetime.now()。一旦周期结束,任务就会被触发,理论上 @hourly DAG永远不会在 now()移动后一小时到达。

资料来源: [https://airflow.incubator.apache.org/faq.html#what-s-the-deal-with-start-date]