我一直在气流中尝试'example_subdag_operator'。我将'start_date'更改为datetime.now()
然后手动触发dag运行。运算符为绿色,但当我放大到子标本身时,没有执行任何操作(图表视图中为白色),“运行”下拉列表为空。 \
我使用从master构建的最新版本。我也测试了pip发布的版本。仍然是同一个问题\
这是一个错误吗?或者我错过了什么?
from datetime import datetime
from airflow.models import DAG
from airflow.operators.dummy_operator import DummyOperator
from airflow.operators.subdag_operator import SubDagOperator
from airflow.example_dags.subdags.subdag import subdag
DAG_NAME = 'example_subdag_operator'
args = {
'owner': 'airflow',
'start_date': datetime.now(),
}
dag = DAG(
dag_id=DAG_NAME,
default_args=args,
schedule_interval="@once",
)
start = DummyOperator(
task_id='start',
default_args=args,
dag=dag,
)
section_1 = SubDagOperator(
task_id='section-1',
subdag=subdag(DAG_NAME, 'section-1', args),
default_args=args,
dag=dag,
)
some_other_task = DummyOperator(
task_id='some-other-task',
default_args=args,
dag=dag,
)
section_2 = SubDagOperator(
task_id='section-2',
subdag=subdag(DAG_NAME, 'section-2', args),
default_args=args,
dag=dag,
)
end = DummyOperator(
task_id='end',
default_args=args,
dag=dag,
)
start.set_downstream(section_1)
section_1.set_downstream(some_other_task)
some_other_task.set_downstream(section_2)
section_2.set_downstream(end)
答案 0 :(得分:0)
这不是一个错误。建议不要为start_date使用动态值,尤其是 datetime.now()。一旦周期结束,任务就会被触发,理论上 @hourly DAG永远不会在 now()移动后一小时到达。
资料来源: [https://airflow.incubator.apache.org/faq.html#what-s-the-deal-with-start-date]