AWS: 亚马逊网络服务¶
Airflow 支持 亚马逊网络服务。
所有钩子都基于 airflow.providers.amazon.aws.hooks.base_aws
。
服务¶
这些集成允许您在亚马逊网络服务中执行各种操作。
Amazon Appflow¶
Amazon Athena¶
Amazon Bedrock¶
Amazon Chime¶
Amazon CloudFormation¶
Amazon CloudWatch Logs¶
Amazon Comprehend¶
Amazon DataSync¶
Amazon DynamoDB¶
Amazon EC2¶
Amazon ECS¶
Amazon Elastic Container Registry (ECR)¶
Amazon Elastic Kubernetes Service (EKS)¶
Amazon ElastiCache¶
Amazon EMR¶
Amazon EMR on EKS¶
Amazon EventBridge¶
Amazon Glacier¶
Amazon Kinesis Data Firehose¶
Amazon Managed Service for Apache Flink¶
- 操作符:
- 钩子:
- 传感器:
- 指南:
- 提供者:
- 产品文档:
Amazon Neptune¶
Amazon OpenSearch Serverless¶
Amazon QuickSight¶
Amazon RDS¶
Amazon Redshift¶
Amazon SageMaker¶
Amazon SageMaker Unified Studio¶
Amazon SecretsManager¶
Amazon Simple Email Service (SES)¶
Amazon Simple Notification Service (SNS)¶
Amazon Simple Queue Service (SQS)¶
Amazon Simple Storage Service (S3)¶
Amazon Systems Manager (SSM)¶
Amazon Verified Permissions¶
Amazon Web Services¶
AWS Batch¶
AWS Database Migration Service¶
AWS Glue¶
- 操作符:
airflow.providers.amazon.aws.operators.glue
,airflow.providers.amazon.aws.operators.glue_crawler
。- 钩子:
airflow.providers.amazon.aws.hooks.glue
,airflow.providers.amazon.aws.hooks.glue_crawler
,airflow.providers.amazon.aws.hooks.glue_catalog
。- 传感器:
airflow.providers.amazon.aws.sensors.glue
,airflow.providers.amazon.aws.sensors.glue_crawler
,airflow.providers.amazon.aws.sensors.glue_catalog_partition
。- 指南:
- 提供者:
- 产品文档:
AWS Glue DataBrew¶
AWS Lambda¶
AWS Security Token Service (STS)¶
AWS Step Functions¶
传输¶
这些集成允许您在亚马逊网络服务之间传输数据。
Amazon DynamoDB 到 Amazon Simple Storage Service (S3) 的传输¶
- 源产品文档:
- 目标产品文档:
- 操作符指南:
- Python API:
- 提供者:
Google Cloud Storage (GCS) 到 Amazon Simple Storage Service (S3) 的传输¶
Amazon Glacier 到 Google Cloud Storage (GCS) 的传输¶
- 源产品文档:
- 目标产品文档:
- 操作符指南:
- Python API:
- 提供者:
Google 到 Amazon Simple Storage Service (S3) 的传输¶
- 源产品文档:
- 目标产品文档:
- 操作符指南:
- Python API:
- 提供者:
Apache Hive 到 Amazon DynamoDB 的传输¶
- 源产品文档:
- 目标产品文档:
- 操作符指南:
- Python API:
- 提供者:
超文本传输协议 (HTTP) 到 Amazon Simple Storage Service (S3) 的传输¶
- 源产品文档:
- 目标产品文档:
- 操作符指南:
- Python API:
- 提供者:
互联网消息访问协议 (IMAP) 到 Amazon Simple Storage Service (S3) 的传输¶
- 源产品文档:
- 目标产品文档:
- 操作符指南:
- Python API:
airflow.providers.amazon.aws.transfers.imap_attachment_to_s3
- 提供者:
MongoDB 到 Amazon Simple Storage Service (S3) 的传输¶
- 源产品文档:
- 目标产品文档:
- 操作符指南:
- Python API:
- 提供者:
Amazon Redshift 到 Amazon Simple Storage Service (S3) 的传输¶
- 源产品文档:
- 目标产品文档:
- 操作符指南:
- Python API:
- 提供者:
Amazon Simple Storage Service (S3) 到 Amazon Redshift 的传输¶
- 源产品文档:
- 目标产品文档:
- 操作符指南:
- Python API:
- 提供者:
Amazon Simple Storage Service (S3) 到 SSH 文件传输协议 (SFTP) 的传输¶
- 源产品文档:
- 目标产品文档:
- 操作符指南:
- Python API:
- 提供者:
SSH 文件传输协议 (SFTP) 到 Amazon Simple Storage Service (S3) 的传输¶
- 源产品文档:
- 目标产品文档:
- 操作符指南:
- Python API:
- 提供者:
Amazon Simple Storage Service (S3) 到文件传输协议 (FTP) 的传输¶
- 源产品文档:
- 目标产品文档:
- 操作符指南:
- Python API:
- 提供者:
Exasol 到 Amazon Simple Storage Service (S3) 的传输¶
- 源产品文档:
- 目标产品文档:
- Python API:
- 提供者:
文件传输协议 (FTP) 到 Amazon Simple Storage Service (S3) 的传输¶
- 源产品文档:
- 目标产品文档:
- 操作符指南:
- Python API:
- 提供者:
Salesforce 到 Amazon Simple Storage Service (S3) 的传输¶
- 源产品文档:
- 目标产品文档:
- 操作符指南:
- Python API:
- 提供者:
本地到 Amazon Simple Storage Service (S3) 的传输¶
- 目标产品文档:
- 操作符指南:
- Python API:
- 提供者:
通用 SQL 到 Amazon Simple Storage Service (S3) 的传输¶
- 源产品文档:
- 目标产品文档:
- 操作符指南:
- Python API:
- 提供者:
Amazon Simple Storage Service (S3) 到通用 SQL 的传输¶
- 源产品文档:
- 目标产品文档:
- 操作符指南:
- Python API:
- 提供者:
亚马逊网络服务到亚马逊网络服务的传输¶
- 源产品文档:
- 目标产品文档:
- Python API:
- 提供者:
Microsoft Azure Blob Storage 到 Amazon Simple Storage Service (S3) 的传输¶
Amazon Simple Storage Service (S3) 到 Amazon DynamoDB 的传输¶
- 源产品文档:
- 目标产品文档:
- 操作符指南:
- Python API:
- 提供者:
Amazon Simple Storage Service (S3) 到 Apache Hive 的传输¶
- 源产品文档:
- 目标产品文档:
- Python API:
- 提供者:
Amazon Simple Storage Service (S3) 到 Google Cloud Storage (GCS) 的传输¶
Amazon Simple Storage Service (S3) 到 Microsoft Azure Blob Storage 的传输¶
Amazon Simple Storage Service (S3) 到 MySQL 的传输¶
- 源产品文档:
- 目标产品文档:
- Python API:
- 提供者:
Amazon Simple Storage Service (S3) 到 Snowflake 的传输¶
Amazon Simple Storage Service (S3) 到 Teradata 的传输¶
- 源产品文档:
- 目标产品文档:
- 操作符指南:
- Python API:
- 提供者: