在Airflow中,airflow.cfg是配置文件,包含Airflow实例的所有全局配置选项。然而,有时需要针对给定的Airflow环境进行本地配置,例如更改数据库连接或更改默认日志级别。此时,可以使用airflow_local_settings.py文件。
airflow_local_settings.py文件包含对Airflow实例进行本地定制的代码,并能够覆盖airflow.cfg中的全局配置选项。此文件应放置在$AIRFLOW_HOME目录下。
以下是示例代码:
LOGGING_CONFIG = { 'version': 1, 'disable_existing_loggers': False, 'formatters': { 'airflow.task': { 'format': '[%(asctime)s] {%(filename)s:%(funcName)s:%(lineno)d} %(levelname)s - %(message)s' } }, 'handlers': { 'console': { 'class': 'logging.StreamHandler', 'formatter': 'airflow.task', 'level': 'INFO' }, 'file': { 'class': 'logging.FileHandler', 'filename': '/path/to/airflow/logs/local_airflow.log', 'formatter': 'airflow.task', 'level': 'INFO' } }, 'loggers': { 'airflow.task': { 'handlers': ['console', 'file'], 'level': 'INFO', 'propagate': False, }, } }
SQL_ALCHEMY_CONN = 'sqlite:////path/to/local_database.db'