1.Failedoperation_store_result.Retrying2moretimes. 我们线上用的celeryexecutor,当我的executor接到队列任务执行任务时,经常会出现上面截图的错误。 经过网上查询发现,问题原因应该是celery无法共用airflow的mysql连接配置导致的,所以需要修改celery的数据库配置,比如增加连接池等等 查到的网上其他的相同问题的链接 https://blog.csdn.net/chanyue123/article/details/120544718 https://jiuaidu.com/jianzhan/616149/ 解决...

  5MZ1OoVEfmTd   2023年11月02日   81   0   0 大数据大数据airlfowairlfow

Airflow要设置Task的优先级,涉及到这2个配置 1.weight_rule 2.priority_weight weight_rule默认是downstream。还有其他2个配置upstream和absolute priority_weight默认是1 比如,下面的DAG 1.weight_rule=downstream task 优先级 start 5 x1 2 x2 2 y1 1 y2 1 2.weight_rule=upstream task 优先级 start 1 x1 2 x2 2 y1 3 y2 3...

关注 更多

空空如也 ~ ~

粉丝 更多

空空如也 ~ ~