apache-airflow-providers-sftp

更新日志¶

5.0.0¶

注意

如 Apache Airflow 提供程序支持策略中所述，此提供程序版本仅适用于 Airflow 2.9+。

重大更改¶

警告

所有已弃用的类、参数和功能都已从 sftp 提供程序包中删除。引入了以下重大更改

从 SFTPOperator 中删除了已弃用的 ssh_hook 参数。请改用 sftp_hook。
从 SFTPHook 中删除了已弃用的 ssh_hook 参数。
从 SFTPHook 中删除了已弃用的 ftp_conn_id 参数。请改用 ssh_conn_id。

从 SFTP 提供程序中删除已弃用项 (#44740)

功能¶

feat: 一次性检索 sftp 文件属性而不是多次检索 (#44625)
将 host_proxy_cmd 参数添加到 SSHHook 和 SFTPHook (#44565)

其他¶

将提供程序中的最低 Airflow 版本提升到 Airflow 2.9.0 (#44956)

4.11.1¶

其他¶

从提供程序中删除已弃用的 soft_fail (#41710)

4.11.0¶

注意

如 Apache Airflow 提供程序支持策略中所述，此提供程序版本仅适用于 Airflow 2.8+。

其他¶

将提供程序中的最低 Airflow 版本提升到 Airflow 2.8.0 (#41396)

4.10.3¶

其他¶

openlineage: 将 OpenLineage 提供程序迁移到 V2 方面。 (#39530)

4.10.2¶

Bug 修复¶

修复 SFTPSensor 中的资源管理 (#40022)

其他¶

使用最低的直接依赖关系解析来实现每个提供程序的测试 (#39946)

4.10.1¶

Bug 修复¶

修复 SFTPSensor.newer_than 无法使用 jinja 逻辑 ds/ts 表达式的问题 (#39056)

其他¶

更快地导入 'airflow_version' (#39552)
简化 'airflow_version' 的导入 (#39497)

4.10.0¶

注意

如 Apache Airflow 提供程序支持策略中所述，此提供程序版本仅适用于 Airflow 2.7+。

其他¶

将提供程序中的最低 Airflow 版本提升到 Airflow 2.7.0 (#39240)

4.9.1¶

Bug 修复¶

fix(sftp): 在触发器中的 while 循环内添加 return 语句以生成 (#38391)
关闭可延迟 SFTPSensor 的打开连接 (#38881)

4.9.0¶

功能¶

在 SFTPSensor 中添加 deferrable 参数 (#37117)

4.8.1¶

Bug 修复¶

更改警告消息 (#36148)
在子类中遵循 BaseHook 连接字段方法签名 (#36086)

其他¶

通过 Ruff 在文档字符串中添加代码片段格式 (#36262)

4.8.0¶

注意

如 Apache Airflow 提供程序支持策略中所述，此提供程序版本仅适用于 Airflow 2.6+。

其他¶

将提供程序中的最低 Airflow 版本提升到 Airflow 2.6.0 (#36017)

4.7.0¶

注意

如 Apache Airflow 提供程序支持策略中所述，此提供程序版本仅适用于 Airflow 2.5+。

其他¶

提升提供程序的最低 airflow 版本 (#34728)

4.6.1¶

Bug 修复¶

fix(providers/sftp): 当引发异常时，尊重 soft_fail 参数 (#34169)

其他¶

通过将某些模块放入类型检查块中来改进 Airflow 提供程序中的模块导入 (#33754)

4.6.0¶

功能¶

将 sftp_prefetch 参数添加到 SFTPToGCSOperator (#33274)

其他¶

重构：删除无用的 str() 调用 (#33629)

4.5.0¶

功能¶

openlineage, sftp: 为 sftp 提供者添加 OpenLineage 支持（#31360）

4.4.0¶

功能特性¶

添加 sftp_sensor 装饰器（#32457）

4.3.1¶

注意

此版本放弃了对 Python 3.7 的支持

其他¶

添加关于为提供者放弃 Python 3.7 的说明（#32015）

4.3.0¶

注意

正如Apache Airflow 提供者支持策略中所述，此提供者版本仅适用于 Airflow 2.4+。

其他¶

提升提供者中 Airflow 的最低版本（#30917）

4.2.4¶

错误修复¶

修复当使用 newer_than 且有多个匹配文件时的 SFTPSensor （#29794）

4.2.3¶

错误修复¶

修复带有 pattern 的 sftp 传感器（#29467）

4.2.2¶

错误修复¶

修复 SFTP 操作符模板字段处理（#29068）
FTP 操作符在 __init__ 中包含逻辑（#29073）

4.2.1¶

其他¶

更新 codespell 并修复拼写错误（#28568）
[其他] 去除条件语句中的 'pass' 语句（#27775）

4.2.0¶

注意

正如Apache Airflow 提供者支持策略中所述，此提供者版本仅适用于 Airflow 2.3+。

其他¶

将所有提供者的最低 airflow 版本移动到 2.3.0 （#27196）

错误修复¶

SFTP 提供者：修复默认文件夹权限（#26593）

4.1.0¶

功能特性¶

SFTPOperator - 添加对文件路径列表的支持（#26666）

4.0.0¶

重大变更¶

转换 sftp hook 为使用 paramiko 而不是 pysftp （#24512）

功能特性¶

使用渲染的 'path' 更新 'actual_file_to_check' （#24451）

3.0.0¶

重大变更¶

注意

正如Apache Airflow 提供者支持策略中所述，此提供者版本仅适用于 Airflow 2.2+。

功能特性¶

将 fnmatch 类型 regex 添加到 SFTPSensor （#24084）

2.6.0¶

功能特性¶

向 SFTP 传感器添加 newer_than 参数（#21655）（#22377）

2.5.2¶

错误修复¶

修复为所有提供者错误添加的 install_requires （#22382）

2.5.1¶

其他¶

在 PyPI 中添加 Trove 分类符（框架 :: Apache Airflow :: 提供者）

2.5.0¶

功能特性¶

更新 FTPHook 提供者以具有 test_connection （#21997）

其他¶

支持 Python 3.10
在提供者中添加可选功能。（#21074）

2.4.1¶

错误修复¶

错误修复： “SFTPHook” 不遵守 “ssh_conn_id” 参数（#20756）
修复 SFTPHook 的弃用消息（#20692）

2.4.0 (已撤回)¶

警告

此版本已撤回，原因：发现 ssh_conn_id 存在重大更改

功能特性¶

使 SFTPHook 的构造函数与其超类 SSHHook 保持一致（#20164）

2.3.0¶

功能特性¶

为 sftp hook 添加 test_connection 方法（#19609）

2.2.0¶

功能特性¶

SFTP hook 优先选择 SSH paramiko 密钥，而不是密钥文件路径（#18988）

2.1.1¶

其他¶

优化 Airflow 2.2.0 的连接导入

2.1.0¶

功能特性¶

为 SFTP hook 添加对非 RSA 类型密钥的支持（#16314）

2.0.0¶

重大变更¶

自动应用 apply_default 装饰器（#15667）

警告

由于删除了 apply_default 装饰器，此提供者版本需要 Airflow 2.1.0+。如果您的 Airflow 版本低于 2.1.0，并且您想安装此提供者版本，请先将 Airflow 升级到至少 2.1.0 版本。否则，您的 Airflow 包版本将自动升级，并且您必须手动运行 airflow upgrade db 以完成迁移。

功能特性¶

弃用 SFTPHook 连接额外项中的 private_key_pass 并重命名为 private_key_passphrase （#14028）

1.2.0¶

功能特性¶

取消弃用 SFTPHook 中的 private_key 选项（#15348）
添加日志以显示 SFTP、 FTP 和文件系统传感器中最后修改时间（#15134）

1.1.1¶

特性¶

SFTPHook private_key_pass 额外参数已弃用并重命名为 private_key_passphrase，以便与 SSHHook 中的参数命名保持一致

Bug 修复¶

在发布提供程序 RC 后，对文档和工具的更正（#14082）

1.1.0¶

更新了文档和自述文件。

特性¶

向 SFTP hook 连接添加重试器（#13065）

1.0.0¶

提供程序的初始版本。