Airflow 中文文档：使用systemd运行Airflow

Airflow可以与基于系统的系统集成。这使得观察您的守护进程变得容易，因为systemd可以在失败时重新启动守护进程。在scripts/systemd目录中，您可以找到已在基于Redhat的系统上测试过的单元文件。您可以将它们复制到/usr/lib/systemd/system 。假设Airflow将在airflow:airflow下运行airflow:airflow 。如果不是（或者如果您在非基于Redhat的系统上运行），则可能需要调整单元文件。

从/etc/sysconfig/airflow获取环境配置。提供了一个示例文件。运行调度程序时，请确保在此文件中指定SCHEDULER_RUNS变量。您也可以在此处定义，例如AIRFLOW_HOME或AIRFLOW_CONFIG 。

阅读全文／改进本文

Airflow 中文文档：使用systemd运行Airflow相关推荐

Airflow 中文文档：常见问题
为什么我的任务没有安排好? 您的任务可能无法安排的原因有很多. 以下是一些常见原因: 您的脚本是否"编译",Airflow引擎是否可以解析它并找到您的DAG对象. 要对此进行测试, ...
Airflow 中文文档：时区
默认情况下启用对时区的支持. Airflow在内部和数据库中以UTC格式存储日期时间信息. 它允许您使用时区相关的计划运行DAG. 目前,Airflow不会将其转换为用户界面中的最终用户时区. 它始终 ...
Airflow 中文文档：用Dask扩展
DaskExecutor允许您在Dask分布式群集中运行Airflow任务. Dask集群可以在单个机器上运行,也可以在远程网络上运行. 有关完整详细信息,请参阅分布式文档 . 要创建集群,首先启动调 ...
Airflow 中文文档：概念
Airflow Platform是用于描述,执行和监控工作流的工具. 核心理念 DAG的在Airflow中, DAG (或定向非循环图)是您要运行的所有任务的集合,以反映其关系和依赖关系的方式进行组 ...
Airflow 中文文档：设置配置选项
第一次运行Airflow时,它会在$AIRFLOW_HOME目录中创建一个名为airflow.cfg的文件(默认情况下为~/airflow $AIRFLOW_HOME ). 此文件包含Airflow的 ...
Airflow 中文文档：集成
反向代理 Azure:Microsoft Azure AWS:亚马逊网络服务 Databricks GCP:Google云端平台反向代理可以在反向代理后面设置气流,并能够灵活地设置其端点. 例如, ...
Airflow 中文文档：数据分析
使用数据生产效率的一部分是拥有正确的武器来分析您正在使用的数据. Airflow提供了一个简单的查询界面来编写SQL并快速获得结果,以及一个图表应用程序,可以让您可视化数据. 临时查询 adhoc查询 ...
Airflow 中文文档：保护连接
默认情况下,Airflow将在元数据数据库中以纯文本格式保存连接的密码. 在安装过程中强烈建议使用crypto包. crypto包确实要求您的操作系统安装了libffi-dev. 如果最初未安装cry ...
Airflow 中文文档：初始化数据库后端
如果您想对Airflow进行真正的试驾,您应该考虑设置一个真正的数据库后端并切换到LocalExecutor. 由于Airflow是使用优秀的SqlAlchemy库与其元数据进行交互而构建的,因此您应 ...

Airflow 中文文档：使用systemd运行Airflow

Airflow 中文文档：使用systemd运行Airflow相关推荐

最新文章

热门文章