为什么气流任务以尝试编号0和空运算符失败?

时间:2019-10-09 05:11:08

标签: airflow

我有2名气流工人,每人在一台机器上 在机器A中运行一个文件传感器任务,而在机器B中运行一个rsync任务(将文件从A复制到B),以及另一个用于复制文件的文件传感器任务。 有时,rsync任务会在没有尝试执行的情况下失败,并且不会生成日志文件。 任务的触发规则是all_done和airflow v1.9

传感器任务使用了我禁用的xcom_push和xcom_pull,但是发生了相同的问题

-[ RECORD 3 ]---+-----------------------------------------------------
task_id         | task_name (rsync)
dag_id          | dag_name
execution_date  | 2019-10-08 19:30:00
start_date      |
end_date        | 2019-10-08 20:20:21.649662
duration        |
state           | failed
try_number      | 0
hostname        |
unixname        | nio
job_id          |
pool            | pool_name
queue           | queue name of machine B
priority_weight | 3
operator        |
queued_dttm     | 2019-10-08 20:20:20.550397
pid             |
max_tries       | 3

运算符为空 重试为0 状态为失败

期望rsync任务将运行。

0 个答案:

没有答案