Airflow 可以同时运行单个实例或多个实例,具体取决于配置。
以下是一个使用 Docker 运行多个 Airflow 实例的示例代码:
docker-compose.yml
,其中包含两个 Airflow 服务实例:version: '3'
services:
airflow1:
image: puckel/docker-airflow:1.10.12
ports:
- 8080:8080
volumes:
- ./dags:/usr/local/airflow/dags
- ./logs:/usr/local/airflow/logs
environment:
- LOAD_EX=n
airflow2:
image: puckel/docker-airflow:1.10.12
ports:
- 8081:8080
volumes:
- ./dags:/usr/local/airflow/dags
- ./logs:/usr/local/airflow/logs
environment:
- LOAD_EX=n
docker-compose up -d
http://localhost:8080
和 http://localhost:8081
来访问两个 Airflow 实例。这样,就可以同时运行两个 Airflow 实例。你可以根据需要增加或减少服务实例的数量。每个实例都有自己的独立配置和资源。