我在 Airflow 中有任务 A -> B -> C,当我运行 DAG 并成功完成所有任务时,我希望能够单独清除 B(同时将 C 标记为成功)。 B 清除并进入“no_status”状态,但是当我尝试重新运行 B 时,没有任何反应。我试过 --ignore_dependencies、--ignore_depends_on_past 和 --force 但无济于事。 B 似乎只有在 C 也被清除时才重新运行,然后一切都按预期重新运行。
我希望能够在不更改管道的情况下专门重新运行 B 的原因是 B 的一些外部输入可能会发生轻微变化(文件更改或调整),我想运行它并评估它是在重新启动下游任务之前输出(以减少任何潜在的中断)。
请您参考如下方法:
如果通过命令行清除,您可以指定要清除的任务。
airflow clear your_dag_id --task_regex B --start_date 2017-09-25T17:00:00 --end_date 2017-09-25T17:00:00
如果您想通过 UI 执行此操作,您可以转到 Browse -> Task Instances 找到您要清除的任务实例。从那里删除应该只会清除您选择的任务。您还需要转到 Browse -> DAG Run 并将相关的 DAG 运行设置为运行状态,以便拾取您已清除的任务。
