6.2 性能优化


文档摘要

6.2 性能优化 6.2 性能优化:在确定性调度与不确定性执行之间构筑可伸缩的时空契约 当一个Airflow DAG被提交到Webserver,它并非真正“开始运行”——它只是在元数据层签下一份时间承诺书;当Scheduler扫描到该DAG的下一次计划触发时间,它才在调度空间中为这个承诺划出一道刻度;而当Worker真正拉起Python进程执行 时,这份承诺才第一次遭遇现实世界的混沌——网络抖动、I/O阻塞、内存争用、第三方API限流、甚至一段未加超时的 。


发布者: 作者: 转发
评论区 (0)
U