• 主页
• 核心概念

核心概念

在这里您可以找到关于 Apache Airflow® 的每个核心概念的详细文档以及如何使用它们，以及一个高层次的架构概述。

架构

• 架构概述
  • Airflow 组件
  • 部署 Airflow 组件
  • 架构图
  • 工作负载
  • 控制流
  • 用户界面

工作负载

• DAG
  • 声明 DAG
  • 加载 DAG
  • 运行 DAG
  • DAG 分配
  • 默认参数
  • DAG 装饰器
  • 控制流
  • 动态 DAG
  • DAG 可视化
  • DAG & 任务文档
  • SubDAG
  • TaskGroup 与 SubDAG
  • 打包 DAG
  • .airflowignore
  • DAG 依赖关系
  • DAG 暂停、停用和删除
  • DAG 自动暂停（实验性）
• DAG 运行
  • DAG 运行状态
  • 重新运行 DAG
  • 外部触发器
  • 需要记住的事情
• 任务
  • 关系
  • 任务实例
  • 超时
  • SLAs
  • 特殊异常
  • 僵尸/不死任务
  • 执行器配置
• 操作符
  • Jinja 模板
  • 保留的 params 关键字
• 传感器
• TaskFlow
  • 上下文
  • 日志记录
  • 将任意对象作为参数传递
  • 传感器和 TaskFlow API
  • 历史
• 执行器
  • 执行器类型
  • 同时使用多个执行器
  • 编写您自己的执行器
• 身份验证管理器
  • 为什么可插拔身份验证管理器？
  • 编写您自己的身份验证管理器
• 对象存储
  • 云对象存储不是真正的文件系统
  • 基本用法
  • 配置
  • 路径 API
  • 扩展
  • 复制和移动
  • 外部集成

通信

• XComs
  • 对象存储 XCom 后端
  • 自定义 XCom 后端
  • 验证容器中自定义 XCom 后端的使用
• 变量
• 参数
  • DAG 级别的参数
  • 任务级别的参数
  • 在任务中引用参数
  • JSON 模式验证
  • 使用参数提供触发 UI 表单
  • 禁用运行时参数修改

调试

• 调试 Airflow DAG

上一个 下一个

此条目是否有帮助？