3.3.3.2 SubDagOperator 废弃说明

文档摘要

3.3.3.2 SubDagOperator 废弃说明你有没有在凌晨两点收到过这样的告警？进程 RSS 内存持续攀升至 4.2GB，触发 OOM Killer；DAG 解析耗时从平均 800ms 暴涨至 17s；SubDAG 实例在 UI 中显示为“灰色幽灵”——既不运行，也不失败，连日志都查不到一行。这不是虚构的故障剧本。这是我们在 2023 年 Q3 为某头部电商客户做 Airflow 2.6 升级审计时，在其核心订单履约 DAG 中真实捕获的“SubDagOperator 遗留陷阱”。而真正令人脊背发凉的是：这个 SubDAG 已稳定运行了 1176 天，从未修改过一行代码，却在一次 scheduler 配置微调后，悄然成为整个数据平台的定时炸弹。这不是偶然。