`airflow.providers.amazon.aws.sensors.glue_crawler`¶

模块内容¶

等待 AWS Glue 爬虫达到以下任何状态。

class airflow.providers.amazon.aws.sensors.glue_crawler.GlueCrawlerSensor(*, crawler_name, **kwargs)[源代码]¶

基类: airflow.providers.amazon.aws.sensors.base_aws.AwsBaseSensor[airflow.providers.amazon.aws.hooks.glue_crawler.GlueCrawlerHook]

等待 AWS Glue 爬虫达到以下任何状态。

‘FAILED’, ‘CANCELLED’, ‘SUCCEEDED’

另请参阅

有关如何使用此传感器的更多信息，请查看指南：等待 AWS Glue 爬虫状态

参数

crawler_name (str) – AWS Glue 爬虫的唯一名称
aws_conn_id – 用于 AWS 凭证的 Airflow 连接。如果此值为 None 或为空，则使用默认的 boto3 行为。如果在分布式方式下运行 Airflow，且 aws_conn_id 为 None 或为空，则将使用默认的 boto3 配置（并且必须在每个工作节点上维护）。
region_name – AWS 区域名称。如果未指定，则使用默认的 boto3 行为。
verify – 是否验证 SSL 证书。请参阅：https://boto3.amazonaws.com/v1/documentation/api/latest/reference/core/session.html
botocore_config – botocore 客户端的配置字典（键值对）。请参阅：https://botocore.amazonaws.com/v1/documentation/api/latest/reference/config.html

poke(context)[源代码]¶

在派生此类时覆盖。