入站通道适配器:控制远程文件获取
在入站通道适配器中,控制远程文件的获取是至关重要的。这涉及到如何配置和管理从远程服务器拉取文件的过程。通过合理设置这些适配器,可以确保文件传输的安全性、效率和可靠性。
QWen Plus 中英对照 Inbound Channel Adapters: Controlling Remote File Fetching在配置入站通道适配器时,您应该考虑两个属性。max-messages-per-poll
,如同所有轮询器一样,可以用于限制每次轮询发出的消息数量(如果准备好发送的消息数量超过配置值)。max-fetch-size
(自版本 5.0 起)可以限制一次从远程服务器检索的文件数量。
以下场景假设起始状态是空的本地目录:
-
max-messages-per-poll=2
和max-fetch-size=1
:适配器获取一个文件,发出它,获取下一个文件,发出它,然后休眠直到下一次轮询。 -
max-messages-per-poll=2
和max-fetch-size=2
):适配器获取两个文件,然后分别发出每个文件。 -
max-messages-per-poll=2
和max-fetch-size=4
:适配器最多获取四个文件(如果可用),并发出前两个(如果有至少两个)。接下来的两个文件将在下一次轮询时发出。 -
max-messages-per-poll=2
和未指定max-fetch-size
:适配器获取所有远程文件,并发出前两个(如果有至少两个)。后续文件将在后续轮询中发出(每次两个)。当所有文件都被消费后,将再次尝试远程获取,以获取任何新文件。
当你部署多个应用程序实例时,我们建议使用较小的 max-fetch-size
,以避免一个实例“抓取”所有文件而导致其他实例饥饿。
max-fetch-size
的另一个用途是,如果你希望停止获取远程文件但继续处理已经获取的文件。通过在 MessageSource
上设置 maxFetchSize
属性(以编程方式、使用 JMX 或使用 控制总线),可以有效地阻止适配器获取更多文件,但允许轮询器继续为之前获取的文件发出消息。如果在更改属性时轮询器处于活动状态,则更改将在下次轮询时生效。
从 5.1 版本开始,同步器可以提供一个 Comparator<FTPFile>
。当使用 maxFetchSize
限制获取的文件数量时,这非常有用。
也请参阅关于 FileListFilter
配置的通用 FTP Inbound Channel Adapter 章节。