在Airflow中，日志管理和任务监控通常采用哪些方法和工具？

回答思路

1. 【回答框架 1】日志默认存储在任务实例对应的文件系统中，通过airflow.cfg配置base_log_folder，可重定向到远程存储如S3或GCS。
2. 【回答框架 2】任务监控依赖Airflow的UI界面，可以查看任务状态、日志、重试次数，以及使用Airflow的REST API获取任务实例信息。
3. 【回答框架 3】可通过设置SLAs（服务等级协议）和触发告警规则，在任务超时或失败时通过邮件、webhook等方式通知相关人员。
4. 【回答框架 4】集成外部监控工具如Prometheus和Grafana，通过暴露的指标（如任务执行时间、成功率）实现更全面的监控。
5. 【回答框架 5】日志保留策略可通过配置日志清理任务或使用外部日志清理机制来管理，避免存储空间不足。
6. 【关键点 1】Airflow日志通过配置可集中存储至远程系统。
7. 【关键点 2】监控基于UI、REST API和自定义指标。
8. 【关键点 3】设置SLAs和告警可及时响应任务异常。
9. 【易错点 1】不配置远程日志会因节点失效而丢失日志。
10. 【易错点 2】仅依赖UI易漏掉批量任务或历史监控，需配合外部指标。
11. 【易错点 3】日志清理不当会导致存储膨胀，影响性能。