airflow日常出错
Posted xuziyu
tags:
篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了airflow日常出错相关的知识，希望对你有一定的参考价值。
今天测试的airflow的web界面开始不正常报错例如这种情况
参考的小伙伴注意要看清楚前提，是我们的airflow本来运行的好好的，突然不行了，不是好没有搭建起来就这样。（如果你是没有搭建好报这个错，基本上是你的web没弄好）
或者出现这种突然所有的任务代码都不在了的情况，时好时坏
去排查日志发现
这里的error日志显示是我们的pid过时了，所以怀疑这是一个僵尸进程，导致新起的web和这个web之间互相切换，才会出现这种时好时坏的现象，所以把这个pid kill掉，然后又把pid文件给删掉，然后重启airflow_web。重启以后就好啦！！！！！！！！！！
以上是关于airflow日常出错的主要内容，如果未能解决你的问题，请参考以下文章
安装气流时出错：默认情况下，Airflow 的依赖项之一安装 GPL
使用 Airflow 从 Google Storage 导出到 BQ 时出错
尝试在 Mac 上安装 apache-airflow 时出错。我怎样才能解决这个问题？
Airflow：`airflow webserver`、`airflow scheduler` 和 `airflow worker` 到底是做啥的？