Apache Livy 连接¶
Apache Livy 连接类型支持连接到 Apache Livy。Apache Livy 连接在底层使用 Http 连接。
默认连接 ID¶
Livy Hook 使用参数 livy_conn_id 作为连接 ID，默认参数值为 livy_default。
配置连接¶
- 主机
Livy 服务器的 http 主机。您可以在
Host字段中添加方案，或者在Schema字段中指定。- 端口
如果主机是 Apache Livy 服务器的 URL，则指定端口。
- 方案（可选）
指定服务类型等：http/https。
- 登录名（可选）
指定要连接的 Apache Livy 服务器的登录名。
- 密码（可选）
指定要连接的 Apache Livy 服务器的密码。
- 额外信息（可选）
以 json 格式指定标头。
当在环境变量中指定连接时，您应该使用 URI 语法来指定它。
请注意，URI 的所有组件都应进行 URL 编码。
例如
export AIRFLOW_CONN_LIVY_DEFAULT='http://username:[email protected]:80?headers=header'