ASF: Apache 软件基金会¶
Airflow 支持由 Apache 软件基金会 创建的各种软件。
软件¶
这些集成允许您在 Apache 软件基金会开发的软件中执行各种操作。
Apache Beam¶
- Operator：
- Hook：
- 指南：
- Provider：
- 产品文档：
Apache Cassandra¶
Apache Drill¶
Apache Druid¶
Apache Flink¶
Apache Hive¶
- Operator：
airflow.providers.apache.hive.operators.hive,airflow.providers.apache.hive.operators.hive_stats.- Hook：
- Sensor：
airflow.providers.apache.hive.sensors.hive_partition,airflow.providers.apache.hive.sensors.metastore_partition,airflow.providers.apache.hive.sensors.named_hive_partition.- 指南：
- Provider：
- 产品文档：
Apache Impala¶
- Hook：
- Provider：
- 产品文档：
Apache Kafka¶
- Operator：
airflow.providers.apache.kafka.operators.consume,airflow.providers.apache.kafka.operators.produce.- Hook：
airflow.providers.apache.kafka.hooks.base,airflow.providers.apache.kafka.hooks.client,airflow.providers.apache.kafka.hooks.consume,airflow.providers.apache.kafka.hooks.produce.- Sensor：
- Provider：
- 产品文档：
Apache Kylin¶
- Operator：
- Hook：
- Provider：
- 产品文档：
Apache Livy¶
- Operator：
- Hook：
- Sensor：
- 指南：
- Provider：
- 产品文档：
Apache Pig¶
- Operator：
- Hook：
- 指南：
- Provider：
- 产品文档：
Apache Pinot¶
Apache Spark¶
- Operator：
airflow.providers.apache.spark.operators.spark_jdbc,airflow.providers.apache.spark.operators.spark_sql,airflow.providers.apache.spark.operators.spark_submit.- Hook：
airflow.providers.apache.spark.hooks.spark_connect,airflow.providers.apache.spark.hooks.spark_jdbc,airflow.providers.apache.spark.hooks.spark_jdbc_script,airflow.providers.apache.spark.hooks.spark_sql,airflow.providers.apache.spark.hooks.spark_submit.- 指南：
- Provider：
- 产品文档：
标准¶
- Operator：
airflow.providers.standard.operators.datetime,airflow.providers.standard.operators.weekday,airflow.providers.standard.operators.bash,airflow.providers.standard.operators.python,airflow.providers.standard.operators.empty,airflow.providers.standard.operators.trigger_dagrun,airflow.providers.standard.operators.latest_only,airflow.providers.standard.operators.smooth,airflow.providers.standard.operators.branch.- Hook：
airflow.providers.standard.hooks.filesystem,airflow.providers.standard.hooks.package_index,airflow.providers.standard.hooks.subprocess.- Sensor：
airflow.providers.standard.sensors.date_time,airflow.providers.standard.sensors.time_delta,airflow.providers.standard.sensors.time,airflow.providers.standard.sensors.weekday,airflow.providers.standard.sensors.bash,airflow.providers.standard.sensors.python,airflow.providers.standard.sensors.filesystem,airflow.providers.standard.sensors.external_task.- 指南：
- Provider：
- 产品文档：
WebHDFS¶
- Hook：
- Sensor：
- 指南：
- Provider：
- 产品文档：
传输¶
这些集成允许您在 Apache 软件基金会开发的软件之间复制数据。
Apache Hive 到 Amazon DynamoDB¶
- 源产品文档：
- 目标产品文档：
- Operator 指南：
- Python API：
- Provider：
Apache Hive 到 Apache Druid¶
- 源产品文档：
- 目标产品文档：
- Python API：
- Provider：
Vertica 到 Apache Hive¶
- 源产品文档：
- 目标产品文档：
- Python API：
- Provider：
Apache Hive 到 MySQL¶
- 源产品文档：
- 目标产品文档：
- Python API：
- Provider：
Apache Hive 到 Samba¶
- 源产品文档：
- 目标产品文档：
- Python API：
- Provider：
Amazon Simple Storage Service (S3) 到 Apache Hive¶
- 源产品文档：
- 目标产品文档：
- Python API：
- Provider：
MySQL 到 Apache Hive¶
- 源产品文档：
- 目标产品文档：
- Python API：
- Provider：
Microsoft SQL Server (MSSQL) 到 Apache Hive¶
- 源产品文档：
- 目标产品文档：
- Python API：
- Provider：
Apache Cassandra 到 Google Cloud Storage (GCS)¶
- 源产品文档：
- 目标产品文档：
- Python API：
- Provider：