我一直在搜索Apache Airflow的许多文章和官方文档,并已成功配置了东西,以利用本地postgres实例获取服务的元数据。到目前为止,我仍然无法确定的一件事是,是否也可以在数据库中而不是相对于airflow文件夹位置的文件夹中定义Apache Airflow DAG。
我的目标是与Cloud Foundry一起部署无状态Airflow服务,因此,我不能依赖计算机上存储的任何DAG配置文件。是否可以通过从远程数据库动态检索DAG配置文件的方式将Airflow部署到Cloud Foundry?
我一直在搜索许多有关Apache Airflow的文章和官方文档,并且已经成功配置了东西,以利用本地postgres实例获取服务的元数据。 ...
您可以使用DAG serialization功能。它有局限性: