骆驼路由中的生产者流控制问题（持久消息）

Question

我在查找正确的 activemq 配置集以确保 Apache 骆驼路由中的消息吞吐量一致时遇到问题。当前配置使用以下技术：

>

骆驼 （2.15.2）

活动磁共振 （5.12.1）

雄猫 （7.0.56）

以下是Camel中用于ActiveMQ的bean配置集：

<bean id="jmsConnectionFactory" class="org.apache.activemq.spring.ActiveMQConnectionFactory">
    <property name="brokerURL" value="tcp://localhost:6616?jms.prefetchPolicy.queuePrefetch=100" />
     <property name="watchTopicAdvisories" value="false" />
     <property name="producerWindowSize" value="2300" />
</bean>

<bean id="pooledConnectionFactory" class="org.apache.activemq.pool.PooledConnectionFactory"
    init-method="start" destroy-method="stop">
    <property name="maxConnections" value="20" />
    <property name="connectionFactory" ref="jmsConnectionFactory" />
    <property name="idleTimeout" value="0"/>
</bean>

<bean id="jmsConfig" class="org.apache.camel.component.jms.JmsConfiguration">
        <property name="connectionFactory" ref="pooledConnectionFactory"/> 
        <property name="transactionManager" ref="jmsTransactionManager"/> 
        <property name="transacted" value="true"/>

--

<bean id="jmsTransactionManager" class="org.springframework.jms.connection.JmsTransactionManager">
        <property name="connectionFactory" ref="jmsConnectionFactory" />
</bean>

<bean id="activemq" class="org.apache.activemq.camel.component.ActiveMQComponent">
    <property name="configuration" ref="jmsConfig" />
</bean>

以下是在activemq中找到的代理特定配置。xml文件：

<broker xmlns="http://activemq.apache.org/schema/core"
        brokerName="localhost" dataDirectory="./activemq/data/" advisorySupport="false">
        <destinationPolicy>
            <policyMap>
                <policyEntries>
                    <policyEntry queue="PICKAXE.L5.PROC.>" producerFlowControl="true" storeUsageHighWaterMark="50" />
                    <policyEntry queue="PICKAXE.L5.COL.>" producerFlowControl="true" storeUsageHighWaterMark="95" />
                </policyEntries>
            </policyMap>
        </destinationPolicy>

        <managementContext>
            <managementContext createConnector="true" />
        </managementContext>

        <persistenceAdapter>
            <kahaDB directory="./activemq/kahadb/" />
        </persistenceAdapter>

        <systemUsage>
            <systemUsage sendFailIfNoSpaceAfterTimeout="3000000">
                <memoryUsage>
                    <memoryUsage limit="750 mb" />
                </memoryUsage>
                <storeUsage>
                    <storeUsage limit="2 gb" />
                </storeUsage>
                <tempUsage>
                    <tempUsage limit="500 mb" />
                </tempUsage>
            </systemUsage>
        </systemUsage>

        <transportConnectors>

            <transportConnector name="openwire"
                uri="tcp://0.0.0.0:6616?maximumConnections=1000&amp;wireFormat.maxFrameSize=104857600" />
            <transportConnector name="amqp"
                uri="amqp://0.0.0.0:5672?maximumConnections=1000&amp;wireFormat.maxFrameSize=104857600" />
        </transportConnectors>
        <shutdownHooks>
            <bean xmlns="http://www.springframework.org/schema/beans" class="org.apache.activemq.hooks.SpringContextHook" />
        </shutdownHooks>
    </broker>

我正在运行下面的骆驼路由。队列A接收大量消息（1000/s），因此它很快就会被填满，因为这些消息的最终消费者跟不上。当消息量最终达到持久存储生产者的50%时，流控制规则会阻止更多消息被放入队列A。但是，当我通过JMX检查队列深度时，队列A和队列B都不会改变，就好像消费者也被阻止了一样。

    from(activemq:queue:PICKAXE.L5.PROC.A)
        .to(activemq:queue:PICKAXE.L5.COL.B);

    from(activemq:queue:PICKAXE.L5.COL.B)
        .autoStartup(!localFlag)
        .to(customEndpoint)
        .routeId(collectionRouteId);

在大约一周的时间里，我尝试了jms/activemq配置的各种排列，但都没有成功，所以我会感谢任何想法。我想要的行为是让这个流中的消息消费者继续从持久存储中移除消息，这将允许消息继续完整地流动。

Answer 1

该问题是由在上述配置中设置为3000000的sendFailIfNoSpaceAfterTimeout过大引起的。这导致代理在确认由于持久存储已满而导致发送（）命令失败之前等待。

上述配置已替换为以下内容：

<systemUsage sendFailIfNoSpaceAfterTimeout="300">

这确保了（由于消息是持久的，队列集成到Camel路由中），当永久存储已满导致失败时，每0.3秒重试一次send（）操作。