Apache HDFS 连接¶

Apache HDFS 连接类型允许连接到 Apache HDFS。

默认连接 ID¶

Web HDFS Hook 使用参数 webhdfs_conn_id 作为连接 ID，默认情况下参数值为 webhdfs_default。

主机

要连接的主机，可以是 local、yarn 或 URL。对于 Web HDFS Hook，可以将多个主机指定为逗号分隔的列表。

端口

如果主机是 URL，则指定端口。

登录

HDFS 操作的有效用户（非 Kerberos）。

额外参数（可选，连接参数）

指定可在 Web HDFS 连接中使用的额外参数（作为 JSON 字典）。以下额外参数可用于为 Web HDFS Hook 配置 SSL

use_ssl - 是否应使用 SSL。默认设置为 false。
verify - 如何验证 SSL。有关更多信息，请参阅 https://docs.python-requests.org/en/master/user/advanced/#ssl-cert-verification。