在使用airflow2.2.2版本中,使用ExternalTaskSensor进行跨dag的任务监控。
dag b 与 dag c 均依赖与 dag a 的task ,且两者的execution_delta设置是一样的,但在实际执行中b和c总是一个成功,一个超时。这会是什么原因?
airflow ExternalTaskSensor
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
- 邀请回答
-
1条回答 默认 最新
- 于扶摇 2023-06-02 00:13关注
依赖关系错误:请确保DAG A的任务在DAG B和DAG C之前执行。如果DAG A的任务没有在DAG B和DAG C之前执行,那么这些DAG可能会出现问题。请检查DAG的依赖关系并确保它们正确。
挂起任务:如果DAG A的任务挂起,那么DAG B和DAG C的任务也会挂起,导致它们超时。请检查DAG A的任务并确保它们没有挂起。
DAG过长:如果DAG过长,可能会导致某些任务超时。请尝试缩短DAG的长度,或者将某些任务拆分成更小的DAG。
执行时间不足:如果DAG B和DAG C的execution_delta设置不够长,那么可能会导致它们超时。请确保execution_delta设置足够长以完成这些DAG。
DAG A的输出不正确:如果DAG A的输出不正确,那么可能会导致DAG B和DAG C的问题。请检查DAG A的输出并确保它是正确的。解决 无用评论 打赏 举报
悬赏问题
- ¥15 WPF动态创建页面内容
- ¥15 如何对TBSS的结果进行统计学的分析已完成置换检验,如何在最终的TBSS输出结果提取除具体值及如何做进一步相关性分析
- ¥15 SQL数据库操作问题
- ¥100 关于lm339比较电路出现的问题
- ¥15 Matlab安装yalmip和cplex功能安装失败
- ¥15 加装宝马安卓中控改变开机画面
- ¥15 STK安装问题问问大家,这种情况应该怎么办
- ¥15 关于罗技鼠标宏lua文件的问题
- ¥15 halcon ocr mlp 识别问题
- ¥15 已知曲线满足正余弦函数,根据其峰值,还原出整条曲线