此版本仍在开发中,尚不被认为是稳定的。对于最新的稳定版本,请使用 Spring Integration 6.5.1spring-doc.cadn.net.cn

聚合

聚合器基本上是拆分器的镜像,是一种消息处理程序,它接收多条消息并将它们组合成一条消息。 事实上,聚合器通常是包含拆分器的管道中的下游使用者。spring-doc.cadn.net.cn

从技术上讲,聚合器比拆分器更复杂,因为它是有状态的。 它必须保存要聚合的消息,并确定何时准备好聚合完整的消息组。 为此,它需要一个MessageStore.spring-doc.cadn.net.cn

功能性

聚合器通过关联和存储一组相关消息来组合它们,直到该组被视为完整。 此时,聚合器通过处理整个组来创建单个消息,并将聚合消息作为输出发送。spring-doc.cadn.net.cn

实现聚合器需要提供执行聚合的逻辑(即,从多个消息中创建单个消息)。 两个相关的概念是关联和释放。spring-doc.cadn.net.cn

关联确定如何对消息进行分组以进行聚合。 在 Spring Integration 中,默认情况下,基于IntegrationMessageHeaderAccessor.CORRELATION_ID消息头。 具有相同IntegrationMessageHeaderAccessor.CORRELATION_ID被分组在一起。 但是,您可以自定义关联策略,以允许其他方式指定如何将消息分组在一起。 为此,您可以实现CorrelationStrategy(本章后面会介绍)。spring-doc.cadn.net.cn

要确定一组消息准备好处理的时间点,请ReleaseStrategy被咨询。 聚合器的默认发布策略在序列中包含的所有消息都存在时释放组,基于IntegrationMessageHeaderAccessor.SEQUENCE_SIZE页眉。 您可以通过提供对自定义ReleaseStrategy实现。spring-doc.cadn.net.cn

编程模型

聚合 API 由许多类组成:spring-doc.cadn.net.cn

  • 界面MessageGroupProcessor及其子类:MethodInvokingAggregatingMessageGroupProcessorExpressionEvaluatingMessageGroupProcessorspring-doc.cadn.net.cn

  • ReleaseStrategy接口及其默认实现:SimpleSequenceSizeReleaseStrategyspring-doc.cadn.net.cn

  • CorrelationStrategy接口及其默认实现:HeaderAttributeCorrelationStrategyspring-doc.cadn.net.cn

AggregatingMessageHandler

AggregatingMessageHandlerAbstractCorrelatingMessageHandler) 是一个MessageHandler实现,封装聚合器的通用功能(以及其他相关用例),如下所示:spring-doc.cadn.net.cn

决定如何将消息分组在一起的责任委托给CorrelationStrategy实例。 决定是否可以释放消息组的责任委托给ReleaseStrategy实例。spring-doc.cadn.net.cn

以下列表显示了基地的简要亮点AbstractAggregatingMessageGroupProcessor(实施aggregatePayloads方法留给开发者):spring-doc.cadn.net.cn

public abstract class AbstractAggregatingMessageGroupProcessor
              implements MessageGroupProcessor {

    protected Map<String, Object> aggregateHeaders(MessageGroup group) {
        // default implementation exists
    }

    protected abstract Object aggregatePayloads(MessageGroup group, Map<String, Object> defaultHeaders);

}

DefaultAggregatingMessageGroupProcessor,ExpressionEvaluatingMessageGroupProcessorMethodInvokingMessageGroupProcessor作为AbstractAggregatingMessageGroupProcessor.spring-doc.cadn.net.cn

从 5.2 版开始,一个Function<MessageGroup, Map<String, Object>>策略可用于AbstractAggregatingMessageGroupProcessor合并和计算(聚合)输出消息的标头。 这DefaultAggregateHeadersFunction实现可用于返回组之间没有冲突的所有标头的逻辑;组中的一封或多封邮件上缺少标头不被视为冲突。 省略冲突的标头。 与新推出的DelegatingMessageGroupProcessor,则此函数用于任何任意(非AbstractAggregatingMessageGroupProcessor) MessageGroupProcessor实现。 本质上,框架将提供的函数注入到AbstractAggregatingMessageGroupProcessor实例并将所有其他实现包装到DelegatingMessageGroupProcessor. 逻辑上的差异AbstractAggregatingMessageGroupProcessorDelegatingMessageGroupProcessor后者在调用委托策略之前不会提前计算标头,并且如果委托返回MessageAbstractIntegrationMessageBuilder. 在这种情况下,框架假定目标实现已负责生成一组填充到返回结果中的正确标头。 这Function<MessageGroup, Map<String, Object>>策略可作为headers-functionreference 属性,作为AggregatorSpec.headersFunction()Java DSL 的选项和AggregatorFactoryBean.setHeadersFunction()用于纯 Java 配置。spring-doc.cadn.net.cn

CorrelationStrategyAbstractCorrelatingMessageHandler并具有基于IntegrationMessageHeaderAccessor.CORRELATION_IDmessage 标头,如以下示例所示:spring-doc.cadn.net.cn

public AbstractCorrelatingMessageHandler(MessageGroupProcessor processor, MessageGroupStore store,
        CorrelationStrategy correlationStrategy, ReleaseStrategy releaseStrategy) {
    ...
    this.correlationStrategy = correlationStrategy == null ?
        new HeaderAttributeCorrelationStrategy(IntegrationMessageHeaderAccessor.CORRELATION_ID) : correlationStrategy;
    this.releaseStrategy = releaseStrategy == null ? new SimpleSequenceSizeReleaseStrategy() : releaseStrategy;
    ...
}

至于消息组的实际处理,默认实现是DefaultAggregatingMessageGroupProcessor. 它创建了一个Message其有效负载是List为给定组接收的有效负载。 这适用于具有拆分器、发布-订阅通道或上游收件人列表路由器的简单分散收集实现。spring-doc.cadn.net.cn

在此类场景中使用发布-订阅通道或收件人列表路由器时,请务必启用apply-sequence旗。 这样做会添加必要的标头:CORRELATION_ID,SEQUENCE_NUMBERSEQUENCE_SIZE. 默认情况下,该行为对 Spring Integration 中的拆分器启用,但未为发布-订阅通道或收件人列表路由器启用,因为这些组件可能用于不需要这些标头的各种上下文。

为应用程序实现特定聚合器策略时,可以扩展AbstractAggregatingMessageGroupProcessor并实现aggregatePayloads方法。 但是,有更好的解决方案,与 API 的耦合较少,用于实现聚合逻辑,可以通过 XML 或通过注释进行配置。spring-doc.cadn.net.cn

通常,任何 POJO 都可以实现聚合算法,前提是它提供了一个接受单个java.util.List作为参数(也支持参数化列表)。 调用此方法用于聚合消息,如下所示:spring-doc.cadn.net.cn

  • 如果参数是java.util.Collection<T>参数类型 T 可分配给Message,则为聚合而累积的整个消息列表将发送到聚合器。spring-doc.cadn.net.cn

  • 如果参数是非参数化的java.util.Collection或者参数类型不可分配给Message,该方法接收累积消息的有效负载。spring-doc.cadn.net.cn

  • 如果返回类型不可分配给Message,则将其视为Message由框架自动创建。spring-doc.cadn.net.cn

为了简化代码和促进最佳实践(例如低耦合、可测试性等),实现聚合逻辑的首选方法是通过 POJO 并使用 XML 或注释支持在应用程序中配置它。

从 5.3 版开始,在处理消息组后,一个AbstractCorrelatingMessageHandler执行MessageBuilder.popSequenceDetails()具有多个嵌套级别的正确拆分器聚合器方案的消息头修改。 仅当消息组释放结果不是消息集合时,才会执行此作。 在这种情况下,目标MessageGroupProcessor负责MessageBuilder.popSequenceDetails()调用,同时生成这些消息。spring-doc.cadn.net.cn

如果MessageGroupProcessor返回一个Message一个MessageBuilder.popSequenceDetails()仅当sequenceDetails与组中的第一条消息匹配。 (以前,仅当普通有效负载或AbstractIntegrationMessageBuilder已从MessageGroupProcessor.)spring-doc.cadn.net.cn

此功能可由新的popSequence boolean属性,因此MessageBuilder.popSequenceDetails()在某些情况下,当标准拆分器尚未填充关联详细信息时,可以禁用。 从本质上讲,该属性撤消了最近的上游所做的作applySequence = trueAbstractMessageSplitter. 有关更多信息,请参阅拆分器spring-doc.cadn.net.cn

SimpleMessageGroup.getMessages()方法返回一个unmodifiableCollection. 因此,如果聚合 POJO 方法具有Collection<Message>参数,传入的参数正是Collection实例,并且当您使用SimpleMessageStore对于聚合器,该原始Collection<Message>释放群组后被清除。 因此,Collection<Message>如果变量被传递出聚合器,则 POJO 中的变量也会被清除。 如果您希望简单地按原样发布该集合以进行进一步处理,则必须构建一个新的Collection(例如,new ArrayList<Message>(messages)). 从 4.3 版开始,框架不再将消息复制到新集合,以避免创建不需要的额外对象。

在 4.2 版本之前,无法提供MessageGroupProcessor通过使用 XML 配置。 只有 POJO 方法可用于聚合。 现在,如果框架检测到引用的(或内部)bean 实现MessageProcessor,它用作聚合器的输出处理器。spring-doc.cadn.net.cn

如果您希望从自定义MessageGroupProcessor作为消息的有效负载,您的类应该扩展AbstractAggregatingMessageGroupProcessor并实施aggregatePayloads().spring-doc.cadn.net.cn

此外,从 4.2 版本开始,一个SimpleMessageGroupProcessor被提供。 它返回来自组的消息集合,如前所述,这会导致单独发送已释放的消息。spring-doc.cadn.net.cn

这允许聚合器充当消息屏障,在其中,到达的消息将被保留,直到释放策略触发并且组作为单个消息序列被释放。spring-doc.cadn.net.cn

从 6.0 版开始,仅当组处理器是SimpleMessageGroupProcessor. 否则,与任何其他MessageGroupProcessor返回Collection<Message>,则仅发出一条回复消息,并将整个消息集合作为其有效负载。 这种逻辑是由聚合器的规范目的决定的——通过某个键收集请求消息并生成单个分组消息。spring-doc.cadn.net.cn

在 6.5 版之前,如果MessageGroupProcessor(通常是来自 DSL 的 lambda)返回有效负载的集合,即AbstractCorrelatingMessageHandler失败了IllegalArgumentException声明只能收集消息。 从现在开始,这种限制将被消除,并且返回的有效负载集合将作为来自聚合器的单个回复消息发出,仅包含来自最后一个请求消息的标头。 如果需要标头聚合以及有效负载集合,则AbstractAggregatingMessageGroupProcessor建议使用实现而不是普通MessageGroupProcessor功能接口。spring-doc.cadn.net.cn

ReleaseStrategy

ReleaseStrategy接口定义如下:spring-doc.cadn.net.cn

public interface ReleaseStrategy {

  boolean canRelease(MessageGroup group);

}

通常,任何 POJO 都可以实现完成决策逻辑,如果它提供了一个接受单个java.util.List作为参数(也支持参数化列表)并返回布尔值。 在每条新消息到达后调用此方法,以确定组是否完整,如下所示:spring-doc.cadn.net.cn

  • 如果参数是java.util.List<T>和参数类型T可分配给Message,则将组中累积的整个消息列表发送到该方法。spring-doc.cadn.net.cn

  • 如果参数是非参数化的java.util.List或者参数类型不可分配给Message,该方法接收累积消息的有效负载。spring-doc.cadn.net.cn

  • 该方法必须返回true如果消息组已准备好进行聚合,否则为 false。spring-doc.cadn.net.cn

以下示例演示如何使用@ReleaseStrategy注释List类型Message:spring-doc.cadn.net.cn

public class MyReleaseStrategy {

    @ReleaseStrategy
    public boolean canMessagesBeReleased(List<Message<?>>) {...}
}

以下示例演示如何使用@ReleaseStrategy注释List类型String:spring-doc.cadn.net.cn

public class MyReleaseStrategy {

    @ReleaseStrategy
    public boolean canMessagesBeReleased(List<String>) {...}
}

基于前两个示例中的签名,基于 POJO 的发布策略会传递一个Collection尚未发布的消息(如果您需要访问整个Message) 或Collection有效负载对象(如果 type 参数是Message). 这满足了大多数用例。 但是,如果由于某种原因,您需要访问完整的MessageGroup,您应该提供ReleaseStrategy接口。spring-doc.cadn.net.cn

在处理潜在的大型组时,应了解如何调用这些方法,因为在释放组之前可能会多次调用发布策略。 最有效的是实现ReleaseStrategy,因为聚合器可以直接调用它。 第二高效的是 POJO 方法,其中Collection<Message<?>>参数类型。 效率最低的是具有Collection<Something>类型。 框架必须将有效负载从组中的消息复制到一个新的集合中(并可能尝试将有效负载转换为Something) 调用发布策略时。 用Collection<?>避免转换,但仍需要创建新的Collection.spring-doc.cadn.net.cn

出于这些原因,对于大型团体,我们建议您实施ReleaseStrategy.spring-doc.cadn.net.cn

当组被释放以进行聚合时,将处理其所有尚未释放的消息,并将其从组中删除。 如果该组也是完整的(即,如果序列中的所有消息都已到达,或者如果没有定义序列),则该组将标记为完成。 此组的任何新消息都将发送到丢弃通道(如果已定义)。 设置expire-groups-upon-completiontrue(默认值为false) 将删除整个组,并且任何新消息(与删除的组具有相同的相关 ID)将形成一个新组。 您可以使用MessageGroupStoreReapersend-partial-result-on-expiry设置为true.spring-doc.cadn.net.cn

从 6.5 版开始,还可以将关联处理程序配置为discardIndividuallyOnExpiry将整个组作为单个消息丢弃的选项。 本质上,此消息的有效负载是来自过期组的消息列表。 仅在以下情况下有效sendPartialResultOnExpiry设置为false(默认)和dicardChannel被提供。spring-doc.cadn.net.cn

为了便于丢弃迟到的消息,聚合器必须在组释放后维护有关该组的状态。 这最终会导致内存不足的情况。 为避免此类情况,您应该考虑配置MessageGroupStoreReaper以删除组元数据。 到期参数应设置为在达到某个点后使组过期,之后预计不会到达延迟消息。 有关配置收割器的信息,请参阅在聚合器中管理状态:MessageGroupStore.

Spring Integration 提供了一个实现ReleaseStrategy:SimpleSequenceSizeReleaseStrategy. 此实现会咨询SEQUENCE_NUMBERSEQUENCE_SIZE每个到达消息的标头,以确定消息组何时完成并准备好聚合。 如前所述,它也是默认策略。spring-doc.cadn.net.cn

在 5.0 版本之前,默认发布策略为SequenceSizeReleaseStrategy,这在大型团体中表现不佳。 使用该策略,可以检测并拒绝重复的序列号。 此作可能很昂贵。

如果要聚合大型组,则不需要释放部分组,也不需要检测/拒绝重复序列,请考虑使用SimpleSequenceSizeReleaseStrategy相反 - 对于这些用例,它效率要高得多,并且是自 5.0 版以来未指定部分组发布的默认值。spring-doc.cadn.net.cn

聚合大型组

4.3 版本更改了默认值Collection对于SimpleMessageGroupHashSet(它以前是一个BlockingQueue). 当从大型组中删除单个消息时,这很昂贵(需要 O(n) 线性扫描)。 尽管哈希集的删除速度通常要快得多,但对于大型消息来说,它的成本可能很高,因为必须在插入和删除时计算哈希。 如果消息的哈希成本很高,请考虑使用其他集合类型。 如MessageGroupFactory一个SimpleMessageGroupFactory,以便您可以选择Collection最适合您的需求。 您还可以提供自己的工厂实现来创建其他一些Collection<Message<?>>.spring-doc.cadn.net.cn

以下示例演示如何使用上一个实现配置聚合器和SimpleSequenceSizeReleaseStrategy:spring-doc.cadn.net.cn

<int:aggregator input-channel="aggregate"
    output-channel="out" message-store="store" release-strategy="releaser" />

<bean id="store" class="org.springframework.integration.store.SimpleMessageStore">
    <property name="messageGroupFactory">
        <bean class="org.springframework.integration.store.SimpleMessageGroupFactory">
            <constructor-arg value="BLOCKING_QUEUE"/>
        </bean>
    </property>
</bean>

<bean id="releaser" class="SimpleSequenceSizeReleaseStrategy" />
如果过滤器端点涉及聚合器的上游流,则序列大小发布策略(固定或基于sequenceSizeheader)不会达到其目的,因为过滤器可能会丢弃序列中的某些消息。 在这种情况下,建议选择另一个ReleaseStrategy,或使用从丢弃子流发送的补偿消息,该子流的内容中带有一些信息,以便在自定义完整组函数中跳过。 有关详细信息,请参阅过滤器

相关策略

CorrelationStrategy接口定义如下:spring-doc.cadn.net.cn

public interface CorrelationStrategy {

  Object getCorrelationKey(Message<?> message);

}

该方法返回一个Object表示用于将消息与消息组相关联的关联键。 密钥必须满足用于Map关于执行equals()hashCode().spring-doc.cadn.net.cn

一般来说,任何 POJO 都可以实现关联逻辑,并且将消息映射到方法的参数(或多个参数)的规则与ServiceActivator(包括对@Header注释)。 该方法必须返回一个值,并且该值不得null.spring-doc.cadn.net.cn

Spring Integration 提供了一个实现CorrelationStrategy:HeaderAttributeCorrelationStrategy. 此实现返回其中一个消息头(其名称由构造函数参数指定)的值作为关联键。 默认情况下,关联策略是HeaderAttributeCorrelationStrategy返回CORRELATION_IDheader 属性。 如果要用于关联的自定义标头名称,可以在HeaderAttributeCorrelationStrategy并将其作为聚合器关联策略的参考。spring-doc.cadn.net.cn

锁定注册表

对组的更改是线程安全的。 因此,当您同时发送同一相关 ID 的消息时,聚合器中只会处理其中一个消息,从而有效地将其作为每个消息组的单线程。 一个LockRegistry用于获取已解析相关 ID 的锁。 一个DefaultLockRegistry默认使用(内存中)。 用于在共享的服务器之间同步更新MessageGroupStore,则必须配置共享锁注册表。spring-doc.cadn.net.cn

避免死锁

如上所述,当消息组发生变更(添加或释放消息)时,将保持锁定。spring-doc.cadn.net.cn

请考虑以程:spring-doc.cadn.net.cn

...->aggregator1-> ... ->aggregator2-> ...

如果存在多个线程,并且聚合器共享一个公共锁注册表,则可能会出现死锁。 这将导致挂起线程和jstack <pid>可能会显示以下结果:spring-doc.cadn.net.cn

Found one Java-level deadlock:
=============================
"t2":
  waiting for ownable synchronizer 0x000000076c1cbfa0, (a java.util.concurrent.locks.ReentrantLock$NonfairSync),
  which is held by "t1"
"t1":
  waiting for ownable synchronizer 0x000000076c1ccc00, (a java.util.concurrent.locks.ReentrantLock$NonfairSync),
  which is held by "t2"

有几种方法可以避免此问题:spring-doc.cadn.net.cn

  • 确保每个聚合器都有自己的锁注册表(这可以是跨应用程序实例的共享注册表,但流中的两个或多个聚合器必须各自具有不同的注册表)spring-doc.cadn.net.cn

  • 使用ExecutorChannelQueueChannel作为聚合器的输出通道,以便下游流在新线程上运行spring-doc.cadn.net.cn

  • 从 5.1.1 版本开始,将releaseLockBeforeSendaggregator 属性设置为truespring-doc.cadn.net.cn

如果由于某种原因,单个聚合器的输出最终被路由回同一聚合器,也可能导致此问题。 当然,上述第一个解决方案不适用于这种情况。

在 Java DSL 中配置聚合器

有关如何在 Java DSL 中配置聚合器,请参阅聚合器和重排序器spring-doc.cadn.net.cn

使用 XML 配置聚合器

Spring Integration 支持通过<aggregator/>元素。 以下示例显示了聚合器的示例:spring-doc.cadn.net.cn

<channel id="inputChannel"/>

<int:aggregator id="myAggregator"                          (1)
        auto-startup="true"                                (2)
        input-channel="inputChannel"                       (3)
        output-channel="outputChannel"                     (4)
        discard-channel="throwAwayChannel"                 (5)
        message-store="persistentMessageStore"             (6)
        order="1"                                          (7)
        send-partial-result-on-expiry="false"              (8)
        send-timeout="1000"                                (9)

        correlation-strategy="correlationStrategyBean"     (10)
        correlation-strategy-method="correlate"            (11)
        correlation-strategy-expression="headers['foo']"   (12)

        ref="aggregatorBean"                               (13)
        method="aggregate"                                 (14)

        release-strategy="releaseStrategyBean"             (15)
        release-strategy-method="release"                  (16)
        release-strategy-expression="size() == 5"          (17)

        expire-groups-upon-completion="false"              (18)
        empty-group-min-timeout="60000"                    (19)

        lock-registry="lockRegistry"                       (20)

        group-timeout="60000"                              (21)
        group-timeout-expression="size() ge 2 ? 100 : -1"  (22)
        expire-groups-upon-timeout="true"                  (23)

        scheduler="taskScheduler" >                        (24)
            <expire-transactional/>                        (25)
            <expire-advice-chain/>                         (26)
</aggregator>

<int:channel id="outputChannel"/>

<int:channel id="throwAwayChannel"/>

<bean id="persistentMessageStore" class="org.springframework.integration.jdbc.store.JdbcMessageStore">
    <constructor-arg ref="dataSource"/>
</bean>

<bean id="aggregatorBean" class="sample.PojoAggregator"/>

<bean id="releaseStrategyBean" class="sample.PojoReleaseStrategy"/>

<bean id="correlationStrategyBean" class="sample.PojoCorrelationStrategy"/>
1 聚合器的 id 是可选的。
2 生命周期属性,指示是否应在应用程序上下文启动期间启动聚合器。 可选(默认值为 'true')。
3 聚合器从中接收消息的通道。 必填。
4 聚合器将聚合结果发送到的通道。 可选(因为传入消息本身可以在 'replyChannel' 消息标头中指定回复通道)。
5 聚合器向其发送超时消息的通道(如果send-partial-result-on-expiryfalse). 自选。
6 MessageGroupStore用于将消息组存储在其相关键下,直到它们完成。 自选。 默认情况下,它是一个易失性的内存中存储。 有关详细信息,请参阅消息存储
7 当多个句柄订阅同一句柄时,此聚合器的顺序DirectChannel(用于负载平衡目的)。 自选。
8 指示过期消息应聚合并发送到 'output-channel' 或 'replyChannel',一旦其中包含MessageGroup已过期(请参阅MessageGroupStore.expireMessageGroups(long)). 使MessageGroup是通过配置MessageGroupStoreReaper. 但是,您也可以过期MessageGroup通过调用MessageGroupStore.expireMessageGroups(timeout). 您可以通过控制总线作来实现此目的,或者,如果您有对MessageGroupStore实例,通过调用expireMessageGroups(timeout). 否则,此属性本身不执行任何作。 它仅用作指示器,指示是否丢弃或将任何仍在MessageGroup即将到期。 可选(默认值为false). 注意:此属性可能更合适地称为send-partial-result-on-timeout,因为如果出现以下情况,则组实际上可能不会过期expire-groups-upon-timeout设置为false.
9 发送回复时等待的超时间隔Messageoutput-channeldiscard-channel. 默认为30秒。 仅当输出通道具有一些“发送”限制时才应用它,例如QueueChannel具有固定的“容量”。 在这种情况下,一个MessageDeliveryException被抛出。 为AbstractSubscribableChannel实现,则send-timeout被忽略。 为group-timeout(-expression)MessageDeliveryException从计划过期任务中,将导致重新计划此任务。 自选。
10 对实现消息关联(分组)算法的 Bean 的引用。 bean 可以是CorrelationStrategy接口或 POJO。 在后一种情况下,correlation-strategy-method属性也必须定义。 可选(默认情况下,聚合器使用IntegrationMessageHeaderAccessor.CORRELATION_ID标头)。
11 在引用的 bean 上定义的方法correlation-strategy. 它实现了相关决策算法。 可选,有限制 (correlation-strategy必须存在)。
12 表示相关策略的 SpEL 表达式。 例:"headers['something']". 只有其中一个correlation-strategycorrelation-strategy-expression是允许的。
13 对在应用程序上下文中定义的 bean 的引用。 bean 必须实现聚合逻辑,如前所述。 可选(默认情况下,聚合消息列表将成为输出消息的有效负载)。
14 在 bean 上定义的方法,由ref属性。 它实现了消息聚合算法。 可选(取决于ref属性)。
15 对实现发布策略的 Bean 的引用。 bean 可以是ReleaseStrategy接口或 POJO。 在后一种情况下,release-strategy-method属性也必须定义。 可选(默认情况下,聚合器使用IntegrationMessageHeaderAccessor.SEQUENCE_SIZEheader 属性)。
16 在 bean 上定义的方法,由release-strategy属性。 它实现了完成决策算法。 可选,有限制 (release-strategy必须存在)。
17 表示发布策略的 SpEL 表达式。 表达式的根对象是MessageGroup. 例:"size() == 5". 只有其中一个release-strategyrelease-strategy-expression是允许的。
18 当设置为true(默认值为false),则已完成的组将从消息存储中删除,从而使具有相同关联的后续消息形成一个新组。 默认行为是将与已完成组具有相同关联的消息发送到discard-channel.
19 仅当MessageGroupStoreReaperMessageStore<aggregator>. 默认情况下,当MessageGroupStoreReaper配置为使部分组过期,空组也会被删除。 正常释放组后存在空组。 空组支持检测和丢弃迟到的邮件。 如果您希望空组过期的时间比过期的部分组更长的时间,请设置此属性。 然后,空组不会从MessageStore直到它们至少在这个毫秒数内没有被修改。 请注意,空组的实际过期时间也受到收割者的timeout属性,它可以与此值加上超时一样多。
20 org.springframework.integration.util.LockRegistry豆。 它曾经获得一个Lock基于groupId对于MessageGroup. 默认情况下,内部DefaultLockRegistry被使用。 使用LockRegistry,例如ZookeeperLockRegistry,确保聚合器只有一个实例可以同时对组进行作。 有关更多信息,请参阅 Redis 锁注册表Zookeeper 锁注册表
21 超时(以毫秒为单位)强制MessageGroupReleaseStrategy当前消息到达时不会释放组。 此属性为聚合器提供了内置的基于时间的发布策略,当需要发出部分结果(或丢弃组)时,如果新消息未到达MessageGroup在从最后一条消息到达开始计算的超时内。 要设置一个超时,该超时从时间开始计算MessageGroup创建了,请参阅group-timeout-expression信息。 当新消息到达聚合器时,任何现有的ScheduledFuture<?>对于它的MessageGroup被取消。 如果ReleaseStrategy返回false(意思是不要释放)和groupTimeout > 0,则计划新任务使组过期。 我们不建议将此属性设置为零(或负值)。 这样做会有效地禁用聚合器,因为每个消息组都会立即完成。 但是,您可以使用表达式有条件地将其设置为零(或负值)。 看group-timeout-expression以获取信息。 在完成期间采取的作取决于ReleaseStrategysend-partial-group-on-expiry属性。 有关详细信息,请参阅聚合器和组超时。 它与group-timeout-expression属性。
22 计算结果为groupTimeout使用MessageGroup作为#root评估上下文对象。 用于调度MessageGroup强制完成。 如果表达式的计算结果为null,则未计划完成。 如果计算结果为零,则该组将立即在当前线程上完成。 实际上,这提供了一个动态的group-timeout财产。 例如,如果您希望强制完成MessageGroup自创建组以来经过 10 秒后,您可以考虑使用以下 SpEL 表达式:timestamp + 10000 - T(System).currentTimeMillis()哪里timestampMessageGroup.getTimestamp()作为MessageGroup这是#root评估上下文对象。 但请记住,组创建时间可能与第一个到达消息的时间不同,具体取决于其他组过期属性的配置。 看group-timeout了解更多信息。 相互排斥group-timeout属性。
23 当组由于超时(或MessageGroupStoreReaper),默认情况下,该组已过期(完全删除)。 迟到的邮件会启动一个新组。 您可以将其设置为false以完成组,但保留其元数据,以便丢弃延迟到达的邮件。 空组可以稍后使用MessageGroupStoreReaperempty-group-min-timeout属性。 它默认为 'true'。
24 一个TaskSchedulerbean 引用来调度MessageGroup如果没有新消息到达,则强制完成MessageGroupgroupTimeout. 如果未提供,则默认调度程序 (taskScheduler) 在ApplicationContext (ThreadPoolTaskScheduler) 被使用。 如果出现以下情况,则此属性不适用group-timeoutgroup-timeout-expression未指定。
25 从 4.1 版本开始。 它允许为forceComplete操作。 它是从group-timeout(-expression)或通过MessageGroupStoreReaper并且不适用于法线add,releasediscard操作。 只有这个子元素或<expire-advice-chain/>是允许的。
26 4.1 版本开始。 它允许配置任何Advice对于forceComplete操作。 它是从group-timeout(-expression)或通过MessageGroupStoreReaper并且不适用于法线add,releasediscard操作。 只有这个子元素或<expire-transactional/>是允许的。 交易Advice也可以在此处使用 Spring 进行配置txNamespace。
即将过期的组

有两个属性与即将过期(完全删除)的组相关。 当一个组过期时,没有它的记录,如果新消息到达具有相同的关联性,那么将启动一个新组。 当组完成(没有过期)时,空组将保留,并丢弃迟到的消息。 稍后可以使用MessageGroupStoreReaper结合empty-group-min-timeout属性。spring-doc.cadn.net.cn

expire-groups-upon-completion与“正常”完成相关,当ReleaseStrategy释放组。 默认为false.spring-doc.cadn.net.cn

如果组未正常完成,但由于超时而被释放或丢弃,则该组通常已过期。 从 4.1 版开始,您可以使用以下命令来控制此行为expire-groups-upon-timeout. 它默认为true用于向后兼容性。spring-doc.cadn.net.cn

当组超时时,ReleaseStrategy再给一次释放小组的机会。 如果它这样做并且expire-groups-upon-timeout为false,则过期由expire-groups-upon-completion. 如果在超时期间释放策略未释放组,则过期时间由expire-groups-upon-timeout. 超时组要么被丢弃,要么发生部分释放(基于send-partial-result-on-expiry).

从 5.0 版开始,空组也计划在empty-group-min-timeout. 如果expireGroupsUponCompletion == falseminimumTimeoutForEmptyGroups > 0,则在正常或部分序列发布发生时安排删除组的任务。spring-doc.cadn.net.cn

从版本 5.4 开始,可以将聚合器(和重排序器)配置为使孤立组过期(持久消息存储中可能不会释放的组)。 这expireTimeout(如果大于0) 表示应清除存储中早于此值的组。 这purgeOrphanedGroups()方法在启动时被调用,并且与提供的expireDuration,在计划任务中定期进行。 该方法也可以随时在外部调用。 过期逻辑完全委托给forceComplete(MessageGroup)根据上述提供的到期选项的功能。 当需要从那些不再使用常规消息到达逻辑释放的旧组中清理消息存储时,这种定期清除功能非常有用。 在大多数情况下,当使用持久性消息组存储时,会在应用程序重新启动后发生这种情况。 该功能类似于MessageGroupStoreReaper使用计划任务,但当使用组超时而不是收割器时,提供了一种处理特定组件内旧组的便捷方法。 这MessageGroupStore必须专门为当前相关终结点提供。 否则,一个聚合器可能会从另一个聚合器中清除组。 使用聚合器,使用此技术过期的组将被丢弃或作为部分组释放,具体取决于expireGroupsUponCompletion财产。spring-doc.cadn.net.cn

我们通常建议使用ref属性,如果自定义聚合器处理程序实现可以在其他<aggregator>定义。 但是,如果自定义聚合器实现仅由<aggregator>,您可以使用内部 bean 定义(从 1.0.3 版开始)在<aggregator>元素,如以下示例所示:spring-doc.cadn.net.cn

<aggregator input-channel="input" method="sum" output-channel="output">
    <beans:bean class="org.foo.PojoAggregator"/>
</aggregator>
同时使用ref属性和内部 Bean 定义<aggregator>不允许配置,因为它会产生不明确的条件。 在这种情况下,将引发异常。

以下示例显示了聚合器 bean 的实现:spring-doc.cadn.net.cn

public class PojoAggregator {

  public Long add(List<Long> results) {
    long total = 0l;
    for (long partialResult: results) {
      total += partialResult;
    }
    return total;
  }
}

前面示例的完成策略 bean 的实现可能如下所示:spring-doc.cadn.net.cn

public class PojoReleaseStrategy {
...
  public boolean canRelease(List<Long> numbers) {
    int sum = 0;
    for (long number: numbers) {
      sum += number;
    }
    return sum >= maxValue;
  }
}
只要有意义,就可以将发布策略方法和聚合器方法组合成一个 bean。

上面示例的关联策略 bean 的实现可能如下所示:spring-doc.cadn.net.cn

public class PojoCorrelationStrategy {
...
  public Long groupNumbersByLastDigit(Long number) {
    return number % 10;
  }
}

前面示例中的聚合器将按某些条件(在本例中为除以 10 后的余数)对数字进行分组,并保留该组,直到有效负载提供的数字之和超过某个值。spring-doc.cadn.net.cn

只要有意义,就可以将发布策略方法、关联策略方法和聚合器方法组合在单个 Bean 中。 (实际上,它们都可以组合起来,也可以组合其中任何两个。

聚合器和 Spring 表达式语言 (SpEL)

从 Spring Integration 2.0 开始,您可以使用 SpEL 处理各种策略(关联、发布和聚合),如果此类发布策略背后的逻辑相对简单,我们建议使用这种策略。 假设您有一个旧组件,该组件旨在接收对象数组。 我们知道,默认发布策略会在List. 现在我们有两个问题。 首先,我们需要从列表中提取单个消息。 其次,我们需要提取每条消息的有效负载并组装对象数组。 以下示例解决了这两个问题:spring-doc.cadn.net.cn

public String[] processRelease(List<Message<String>> messages){
    List<String> stringList = new ArrayList<>();
    for (Message<String> message : messages) {
        stringList.add(message.getPayload());
    }
    return stringList.toArray(new String[]{});
}

但是,使用 SpEL,实际上可以使用单行表达式相对容易地处理此类需求,从而避免您编写自定义类并将其配置为 bean。 以下示例显示了如何执行此作:spring-doc.cadn.net.cn

<int:aggregator input-channel="aggChannel"
    output-channel="replyChannel"
    expression="#this.![payload].toArray()"/>

在前面的配置中,我们使用集合投影表达式从列表中所有消息的有效负载中组装一个新集合,然后将其转换为数组,从而获得与前面的 Java 代码相同的结果。spring-doc.cadn.net.cn

在处理自定义发布和关联策略时,可以应用相同的基于表达式的方法。spring-doc.cadn.net.cn

而不是为自定义定义 beanCorrelationStrategycorrelation-strategy属性,您可以将简单的关联逻辑实现为 SpEL 表达式,并在correlation-strategy-expression属性,如以下示例所示:spring-doc.cadn.net.cn

correlation-strategy-expression="payload.person.id"

在前面的示例中,我们假设有效负载具有person属性,并带有id,这将用于关联消息。spring-doc.cadn.net.cn

同样,对于ReleaseStrategy,您可以将发布逻辑实现为 SpEL 表达式,并在release-strategy-expression属性。 评估上下文的根对象是MessageGroup本身。 这List的消息可以通过使用message表达式中组的属性。spring-doc.cadn.net.cn

在 5.0 版之前的版本中,根对象是Message<?>,如前面的示例所示:
release-strategy-expression="!messages.?[payload==5].empty"

在前面的示例中,SpEL 评估上下文的根对象是MessageGroup本身,并且您表示,一旦出现有效负载为5在这个组中,该组应该被释放。spring-doc.cadn.net.cn

聚合器和组超时

从 4.0 版开始,引入了两个新的互斥属性:group-timeoutgroup-timeout-expression. 请参阅使用 XML 配置聚合器。 在某些情况下,如果ReleaseStrategy当前消息到达时不会释放。 为此,该groupTimeout选项允许安排MessageGroup强制完成,如以下示例所示:spring-doc.cadn.net.cn

<aggregator input-channel="input" output-channel="output"
        send-partial-result-on-expiry="true"
        group-timeout-expression="size() ge 2 ? 10000 : -1"
        release-strategy-expression="messages[0].headers.sequenceNumber == messages[0].headers.sequenceSize"/>

在此示例中,如果聚合器按顺序接收最后一条消息,则正常发布是可能的,如release-strategy-expression. 如果该特定消息未到达,则groupTimeout强制组在十秒后完成,只要该组至少包含两个消息。spring-doc.cadn.net.cn

强制组完成的结果取决于ReleaseStrategysend-partial-result-on-expiry. 首先,再次咨询发布策略,看看是否要进行正常发布。 虽然组没有改变,但ReleaseStrategy这个时候可以决定放团。 如果发布策略仍未释放组,则该组已过期。 如果send-partial-result-on-expirytrue,(部分) 中的现有消息MessageGroup作为普通聚合器回复消息发布给output-channel. 否则,它将被丢弃。spring-doc.cadn.net.cn

之间有区别groupTimeout行为和MessageGroupStoreReaper(请参阅使用 XML 配置聚合器)。 收割者为所有MessageGroups 在MessageGroupStore周期性地。 这groupTimeout为每个人做MessageGroup如果在groupTimeout. 此外,收割器可用于删除空组(如果expire-groups-upon-completion是假的)。spring-doc.cadn.net.cn

从 5.5 版本开始,groupTimeoutExpression可以评估为java.util.Date实例。 这在根据组创建时间 (MessageGroup.getTimestamp()),而不是当前消息到达,因为它是在groupTimeoutExpression被评估为long:spring-doc.cadn.net.cn

group-timeout-expression="size() ge 2 ? new java.util.Date(timestamp + 200) : null"

使用注释配置聚合器

以下示例显示了配置了注释的聚合器:spring-doc.cadn.net.cn

public class Waiter {
  ...

  @Aggregator  (1)
  public Delivery aggregatingMethod(List<OrderItem> items) {
    ...
  }

  @ReleaseStrategy  (2)
  public boolean releaseChecker(List<Message<?>> messages) {
    ...
  }

  @CorrelationStrategy  (3)
  public String correlateBy(OrderItem item) {
    ...
  }
}
1 指示此方法应用作聚合器的注释。 如果将此类用作聚合器,则必须指定它。
2 指示此方法用作聚合器的发布策略的注释。 如果任何方法上都不存在,聚合器将使用SimpleSequenceSizeReleaseStrategy.
3 指示该方法应用作聚合器的相关策略的注释。 如果未指示相关策略,聚合器将使用HeaderAttributeCorrelationStrategy基于CORRELATION_ID.

XML 元素提供的所有配置选项也可用于@Aggregator注解。spring-doc.cadn.net.cn

聚合器可以从 XML 显式引用,或者如果@MessageEndpoint在类上定义,通过类路径扫描自动检测。spring-doc.cadn.net.cn

注释配置 (@Aggregator等)仅涵盖简单的用例,其中大多数默认选项就足够了。 如果您在使用注释配置时需要对这些选项进行更多控制,请考虑使用@Bean定义AggregatingMessageHandler并标记其@Bean方法@ServiceActivator,如以下示例所示:spring-doc.cadn.net.cn

@ServiceActivator(inputChannel = "aggregatorChannel")
@Bean
public MessageHandler aggregator(MessageGroupStore jdbcMessageGroupStore) {
     AggregatingMessageHandler aggregator =
                       new AggregatingMessageHandler(new DefaultAggregatingMessageGroupProcessor(),
                                                 jdbcMessageGroupStore);
     aggregator.setOutputChannel(resultsChannel());
     aggregator.setGroupTimeoutExpression(new ValueExpression<>(500L));
     aggregator.setTaskScheduler(this.taskScheduler);
     return aggregator;
}
从 4.2 版开始,AggregatorFactoryBean可用于简化AggregatingMessageHandler.

在聚合器中管理状态:MessageGroupStore

聚合器(以及 Spring Integration 中的其他一些模式)是一种有状态模式,它要求根据一段时间内到达的一组消息做出决策,所有这些消息都具有相同的关联键。 有状态模式中接口的设计(例如ReleaseStrategy)的原则是组件(无论是由框架定义还是由用户定义)都应该能够保持无状态。 所有状态都由MessageGroup其管理权委托给MessageGroupStore. 这MessageGroupStore接口定义如下:spring-doc.cadn.net.cn

public interface MessageGroupStore {

    int getMessageCountForAllMessageGroups();

    int getMarkedMessageCountForAllMessageGroups();

    int getMessageGroupCount();

    MessageGroup getMessageGroup(Object groupId);

    MessageGroup addMessageToGroup(Object groupId, Message<?> message);

    MessageGroup markMessageGroup(MessageGroup group);

    MessageGroup removeMessageFromGroup(Object key, Message<?> messageToRemove);

    MessageGroup markMessageFromGroup(Object key, Message<?> messageToMark);

    void removeMessageGroup(Object groupId);

    void registerMessageGroupExpiryCallback(MessageGroupCallback callback);

    int expireMessageGroups(long timeout);
}

有关更多信息,请参阅 Javadocspring-doc.cadn.net.cn

MessageGroupStoreMessageGroups在等待触发发布策略时,该事件可能永远不会发生。因此,为了防止过时消息滞留,并让易失性存储提供一个钩子,以便在应用程序关闭时进行清理,MessageGroupStore允许您注册回调以应用于其MessageGroups当它们过期时。界面非常简单,如以下列表所示:spring-doc.cadn.net.cn

public interface MessageGroupCallback {

    void execute(MessageGroupStore messageGroupStore, MessageGroup group);

}

回调可以直接访问存储和消息组,以便它可以管理持久状态(例如,通过从存储中完全删除组)。spring-doc.cadn.net.cn

MessageGroupStore维护这些回调的列表,根据需要将其应用于时间戳早于作为参数提供的时间的所有消息(请参阅registerMessageGroupExpiryCallback(..)expireMessageGroups(..)方法,如前所述)。spring-doc.cadn.net.cn

重要的是不要使用相同的MessageGroupStore实例,当您打算依赖expireMessageGroups功能性。 每AbstractCorrelatingMessageHandler注册自己的MessageGroupCallback基于forceComplete()回调。 这样,每个过期的组可能会被错误的聚合器完成或丢弃。 从 5.0.10 版本开始,一个UniqueExpiryCallbackAbstractCorrelatingMessageHandler对于MessageGroupStore. 这MessageGroupStore反过来,检查是否存在此类的实例,并记录错误并显示相应消息(如果回调集中已存在)。 这样,框架就不允许使用MessageGroupStore实例,以避免上述过期的副作用,而不是由特定相关处理程序创建的组。

您可以调用expireMessageGroups方法。 任何早于当前时间减去此值的消息都已过期并应用回调。 因此,是商店的用户定义了消息组“到期”的含义。spring-doc.cadn.net.cn

为了方便用户,Spring Integration 以MessageGroupStoreReaper,如以下示例所示:spring-doc.cadn.net.cn

<bean id="reaper" class="org...MessageGroupStoreReaper">
    <property name="messageGroupStore" ref="messageStore"/>
    <property name="timeout" value="30000"/>
</bean>

<task:scheduled-tasks scheduler="scheduler">
    <task:scheduled ref="reaper" method="run" fixed-rate="10000"/>
</task:scheduled-tasks>

收割者是一个Runnable. 在前面的示例中,消息组存储的 expire 方法每十秒调用一次。 超时本身为 30 秒。spring-doc.cadn.net.cn

重要的是要了解 的 'timeout' 属性MessageGroupStoreReaper是一个近似值,受任务计划程序速率的影响,因为此属性仅在下一次计划执行MessageGroupStoreReaper任务。 例如,如果超时设置为 10 分钟,但MessageGroupStoreReaper任务计划每小时运行一次,并且最后一次执行MessageGroupStoreReaper任务发生在超时前一分钟,则MessageGroup在接下来的 59 分钟内不会过期。 因此,我们建议将速率设置为至少等于超时值或更短。

除了收割器之外,当应用程序关闭时,也会通过AbstractCorrelatingMessageHandler.spring-doc.cadn.net.cn

AbstractCorrelatingMessageHandler注册自己的过期回调,这是带有布尔标志的链接send-partial-result-on-expiry在聚合器的 XML 配置中。 如果标志设置为true,则在调用过期回调时,组中尚未释放的任何未标记消息都可以发送到输出通道。spring-doc.cadn.net.cn

由于MessageGroupStoreReaper从计划任务调用,并且可能会导致消息的生成(取决于sendPartialResultOnExpiryoption) 给下游集成流,建议提供自定义TaskScheduler使用MessagePublishingErrorHandler通过errorChannel,正如常规聚合器发布功能所期望的那样。 同样的逻辑也适用于组超时功能,该功能也依赖于TaskScheduler. 有关详细信息,请参阅错误处理

当共享的MessageStore用于不同的关联端点,您必须配置适当的CorrelationStrategy以确保组 ID 的唯一性。 否则,当一个关联终结点释放或使来自其他关联终结点的消息过期时,可能会发生意外行为。 具有相同关联键的消息存储在同一消息组中。spring-doc.cadn.net.cn

一些MessageStore实现允许通过对数据进行分区来使用相同的物理资源。 例如,JdbcMessageStore有一个region属性和MongoDbMessageStore有一个collectionName财产。spring-doc.cadn.net.cn

有关MessageStore接口及其实现,请参阅消息存储spring-doc.cadn.net.cn

通量聚合器

在 5.2 版本中,FluxAggregatorMessageHandler组件已被引入。 它基于反应堆项目Flux.groupBy()Flux.window()运营商。 传入消息将发送到FluxSinkFlux.create()在此组件的构造函数中。 如果outputChannel未提供或不是ReactiveStreamsSubscribableChannel,订阅主FluxLifecycle.start()实现。 否则,它将推迟到ReactiveStreamsSubscribableChannel实现。 消息按Flux.groupBy()使用CorrelationStrategy组键。 默认情况下,IntegrationMessageHeaderAccessor.CORRELATION_ID查阅邮件的标头。spring-doc.cadn.net.cn

默认情况下,每个关闭的窗口都作为Flux在要生成的消息的有效负载中。 此消息包含窗口中第一条消息的所有标头。 这Flux在输出消息中,有效负载必须订阅并在下游处理。 这样的逻辑可以由setCombineFunction(Function<Flux<Message<?>>, Mono<Message<?>>>)配置选项的FluxAggregatorMessageHandler. 例如,如果我们想要一个List的有效负载,我们可以配置一个Flux.collectList()像下面这样:spring-doc.cadn.net.cn

fluxAggregatorMessageHandler.setCombineFunction(
                (messageFlux) ->
                        messageFlux
                                .map(Message::getPayload)
                                .collectList()
                                .map(GenericMessage::new));

中有几个选项FluxAggregatorMessageHandler要选择适当的窗口策略,请执行以下作:spring-doc.cadn.net.cn

  • setBoundaryTrigger(Predicate<Message<?>>)- 传播到Flux.windowUntil()算子。 有关更多信息,请参阅其 Javadocs。 优先于所有其他窗口选项。spring-doc.cadn.net.cn

  • setWindowSize(int)setWindowSizeFunction(Function<Message<?>, Integer>)- 传播到Flux.window(int)windowTimeout(int, Duration). 默认情况下,窗口大小是根据组中的第一条消息及其IntegrationMessageHeaderAccessor.SEQUENCE_SIZE页眉。spring-doc.cadn.net.cn

  • setWindowTimespan(Duration)- 传播到Flux.window(Duration)windowTimeout(int, Duration)取决于窗口大小配置。spring-doc.cadn.net.cn

  • setWindowConfigurer(Function<Flux<Message<?>>, Flux<Flux<Message<?>>>>)- 一个函数,用于将转换应用于公开选项未涵盖的任何自定义窗口作的分组通量。spring-doc.cadn.net.cn

由于此组件是MessageHandler实现它可以简单地用作@Bean定义与@ServiceActivator消息传递注释。 对于 Java DSL,它可以从.handle()EIP 方法。 下面的示例演示了我们如何注册IntegrationFlow在运行时,以及如何FluxAggregatorMessageHandler可以与上游的分路器相关联:spring-doc.cadn.net.cn

IntegrationFlow fluxFlow =
        (flow) -> flow
                .split()
                .channel(MessageChannels.flux())
                .handle(new FluxAggregatorMessageHandler());

IntegrationFlowContext.IntegrationFlowRegistration registration =
        this.integrationFlowContext.registration(fluxFlow)
                .register();

Flux<Message<?>> window =
        registration.getMessagingTemplate()
                .convertSendAndReceive(new Integer[] { 0, 1, 2, 3, 4, 5, 6, 7, 8, 9 }, Flux.class);

消息组上的条件

从 5.5 版本开始,AbstractCorrelatingMessageHandler(包括其 Java 和 XML DSL)公开了一个groupConditionSupplier选项的BiFunction<Message<?>, String, String>实现。 该函数用于添加到组中的每条消息,并将结果条件句子存储到组中以供将来考虑。 这ReleaseStrategy可以查阅此条件,而不是迭代组中的所有消息。 看GroupConditionProviderJavaDocs 和 Message Group Condition 了解更多信息。spring-doc.cadn.net.cn