文章目录问题描述排查总结分析过程 问题描述 现在公司使用的airflow调度器很慢,每次clear一个task之后,这个task要过一段时间才会被调度器调度到,这个时间大约需要15-30s。 使用的airflow版本较老:v1.7.1.3 排查 参数问题 airflow.cfg这个文件里面有很多的关于scheduler的参数,其中跟调度密切相关的有几个: max_threads :这个是调度dag的进程数量,最多有CPU个数的进程。 scheduler_heartbeat_sec :这个是调度的时间间隔,如果上一次调度时间小于这个值,则在这个周期里面不会进行调度。 min_file_proce