使用Spring集成对消息进行速率限制

Question

我是Spring整合的新手。

我们有一个REST应用程序，它接收的消息太多（每分钟6000条消息），超出了数据库的处理能力。所以我想将请求的速率限制为每15秒500条消息（每分钟2000条）。我使用队列通道来实现这一点。

一段时间后，应用程序将创建30000个Java线程。此外，队列通道容纳的消息比队列容量中提到的要多。

如何减少线程数量并限制队列中的消息？

集成上下文xml：

<?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans"
    xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
    xmlns:int="http://www.springframework.org/schema/integration"
    xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans.xsd
        http://www.springframework.org/schema/integration http://www.springframework.org/schema/integration/spring-integration-5.0.xsd">

    <!-- Endpoint -->   
    <int:gateway service-interface="com.ratelimiter.PrintGateway" default-request-channel="inputChannel">
        <int:method name="print"/>  
    </int:gateway>

    <!-- Channel -->
    <int:channel id="inputChannel">
        <int:queue capacity="30000"/>
    </int:channel>

    <!-- Endpoint -->   
    <int:service-activator ref="receiver" input-channel="inputChannel" method="save">
        <int:poller fixed-rate="15" time-unit="SECONDS" max-messages-per-poll="500"></int:poller>
    </int:service-activator>

    <!--  Spring Bean -->
    <bean id="receiver" class="com.ratelimiter.saveToDataStore"/>

</beans>

PrintGateway接口：

public interface PrintGateway {

    public Future<Message<String>> print(Message<?> message);
}

Answer 1

因为你的网关签名是返回一个未来

默认情况下，它使用

private volatile AsyncTaskExecutor asyncExecutor = new SimpleAsyncTaskExecutor();

这真的为每一条新消息增加了一条新线索。重要的是：它会等待回复，以实现未来。根据你的代码，不会有任何回复，因此，你在网关中的线程会等待很长时间。

您应该考虑将网关的签名更改为 Value返回类型。这样你真的会发送并忘记。不会有任何免费的背景额外线程。