使用mysql8时,运行多个scheduler,需要在airflow.cfg设置
use_row_level_locking=True
另外在airfow的2.0.2版本及以前需要手动设置下mysql的事务隔离级别为READ-COMMITTED,因为默认的REPEATABLE-READ隔离级别会导致很多问题,比如dagrun被设置为成功了,但是里面的task却没执行,产生死锁等问题。
详见:
https://github.com/apache/airflow/issues/15559
https://github.com/apache/airflow/pull/15714



