WebHDFS 操作符¶
WebHDFS 提供对存储在 HDFS 中的数据的 Web 服务访问。同时,它保留了原生 Hadoop 协议提供的安全性,并使用并行性以获得更好的吞吐量。
WebHdfsSensor¶
等待文件或文件夹到达 HDFS¶
WebHdfsSensor(WebHdfsSensor
) 用于检查文件或文件夹是否已到达 HDFS。
使用 filepath
参数进行探测,直到找到提供的文件。
参考资料¶
有关更多信息,请查看 WebHDFS REST API。
WebHDFS 提供对存储在 HDFS 中的数据的 Web 服务访问。同时,它保留了原生 Hadoop 协议提供的安全性,并使用并行性以获得更好的吞吐量。
WebHdfsSensor(WebHdfsSensor
) 用于检查文件或文件夹是否已到达 HDFS。
使用 filepath
参数进行探测,直到找到提供的文件。
有关更多信息,请查看 WebHDFS REST API。