• 主页
• 管理与部署

管理与部署

本节包含有关在生产环境中部署 DAG 和管理 Airflow 部署的信息。

• 生产环境部署
  • 数据库后端
  • 多节点集群
  • 日志记录
  • 配置
  • 调度器运行时长
  • 生产环境容器镜像
  • Kubernetes 的 Helm Chart
  • 在线升级 Airflow
  • Kerberos 认证的 worker
  • Google Cloud 上的安全服务器和服务访问
• 日志与监控
  • 日志记录与监控架构
  • 任务日志记录
  • 高级日志记录配置
  • 指标配置
  • 指标说明
  • 跟踪配置
  • 回调
  • 检查 Airflow 健康状态
  • 错误跟踪
• Kubernetes
  • Kubernetes 的 Helm Chart
• 血缘关系
• 监听器
  • 生命周期事件
  • DagRun 状态变化事件
  • TaskInstance 状态变化事件
  • 资产事件
  • DAG 导入错误事件
  • 用法
  • 兼容性说明
• DAG 打包
  • 为什么 DAG 打包很重要？
  • DAG 打包类型
  • 配置 DAG 打包
  • 编写自定义 DAG 打包
• DAG 序列化
  • DAG 序列化设置
  • 限制
  • 使用不同的 JSON 库
• 模块管理
  • Python 中包/模块的加载机制
  • 典型的包结构
  • Airflow 内置的 PYTHONPATH 条目
  • 代码命名最佳实践
  • 检查 PYTHONPATH 加载配置
  • 向 PYTHONPATH 添加目录
  • 在 Python 中创建包
• 调度器
  • 运行多个调度器
  • 优化调度器性能
• DAG 文件处理
• 优化 DAG processor 性能
  • 影响 DAG processor 性能的因素
  • 如何优化 DAG processor
  • 可能限制 DAG processor 性能的资源
  • 如何提高 DAG processor 的性能
  • DAG processor 配置选项
• 池
  • 使用多个池槽位
• 集群策略
  • 如何定义策略函数
  • 可用策略函数
  • 示例
• 优先级权重
  • 自定义权重规则
• Web Stack
• 插件
  • 用途是什么？
  • 为什么在 Airflow 之上进行构建？
  • 插件何时加载（或重新加载）？
  • 接口
  • 示例
  • 从 CSRF 保护中排除视图
  • 作为 Python 包的插件
  • Airflow 3 中的 Flask Appbuilder 和 Flask Blueprints
  • 故障排除

上一页 下一页

此条目有帮助吗？