angelfixx 2023-05-31 18:41 采纳率: 0%
浏览 6

airflow ExternalTaskSensor

在使用airflow2.2.2版本中,使用ExternalTaskSensor进行跨dag的任务监控。
dag b 与 dag c 均依赖与 dag a 的task ,且两者的execution_delta设置是一样的,但在实际执行中b和c总是一个成功,一个超时。这会是什么原因?

  • 写回答

1条回答 默认 最新

  • 于扶摇 2023-06-02 00:13
    关注

    依赖关系错误:请确保DAG A的任务在DAG B和DAG C之前执行。如果DAG A的任务没有在DAG B和DAG C之前执行,那么这些DAG可能会出现问题。请检查DAG的依赖关系并确保它们正确。
    挂起任务:如果DAG A的任务挂起,那么DAG B和DAG C的任务也会挂起,导致它们超时。请检查DAG A的任务并确保它们没有挂起。
    DAG过长:如果DAG过长,可能会导致某些任务超时。请尝试缩短DAG的长度,或者将某些任务拆分成更小的DAG。
    执行时间不足:如果DAG B和DAG C的execution_delta设置不够长,那么可能会导致它们超时。请确保execution_delta设置足够长以完成这些DAG。
    DAG A的输出不正确:如果DAG A的输出不正确,那么可能会导致DAG B和DAG C的问题。请检查DAG A的输出并确保它是正确的。

    评论

报告相同问题?

问题事件

  • 创建了问题 5月31日

悬赏问题

  • ¥15 WPF动态创建页面内容
  • ¥15 如何对TBSS的结果进行统计学的分析已完成置换检验,如何在最终的TBSS输出结果提取除具体值及如何做进一步相关性分析
  • ¥15 SQL数据库操作问题
  • ¥100 关于lm339比较电路出现的问题
  • ¥15 Matlab安装yalmip和cplex功能安装失败
  • ¥15 加装宝马安卓中控改变开机画面
  • ¥15 STK安装问题问问大家,这种情况应该怎么办
  • ¥15 关于罗技鼠标宏lua文件的问题
  • ¥15 halcon ocr mlp 识别问题
  • ¥15 已知曲线满足正余弦函数,根据其峰值,还原出整条曲线