当引发异常和@JMSListener时，SQS消息可见性超时设置为0

Question

我有一个简单的Spring Boot服务，它使用JMSTemplate监听AWS SQS队列。当消息得到正确处理时，一切都按预期进行。

我使用的是CLIENT_ACKNOWLEDGE，因此当处理过程中抛出异常时，会再次接收消息。但是，将忽略SQS队列上的默认可见性超时设置，并立即再次接收消息。

SQS队列配置了30秒的默认可见性超时和20次接收的重新驱动策略，然后再将消息放入DLQ。

我已禁用该服务，并使用SQS控制台验证是否正确设置了默认可见性超时。我还尝试将JMS消息添加到方法签名中，并执行手动验证。

以下是JMS配置的代码：

@Configuration
@EnableJms
class JmsConfig
{

    @Bean
    @Conditional(AWSEnvironmentCondition.class)
    public SQSConnectionFactory connectionFactory(@Value("${AWS_REGION}") String awsRegion)
    {
        return new SQSConnectionFactory(
            new ProviderConfiguration(),
            AmazonSQSClientBuilder.standard()
                                  .withRegion(Regions.fromName(awsRegion))
                                  .withCredentials(new DefaultAWSCredentialsProviderChain())
        );
    }

    @Bean
    public DefaultJmsListenerContainerFactory jmsListenerContainerFactory(ConnectionFactory connectionFactory)
    {
        DefaultJmsListenerContainerFactory factory =
            new DefaultJmsListenerContainerFactory();
        factory.setConnectionFactory(connectionFactory);
        factory.setDestinationResolver(new DynamicDestinationResolver());
        factory.setConcurrency("3-10");
        factory.setSessionAcknowledgeMode(Session.CLIENT_ACKNOWLEDGE);
        factory.setErrorHandler(defaultErrorHandler());
        return factory;
    }

    @Bean
    public ErrorHandler defaultErrorHandler()
    {
        return new ErrorHandler()
        {
            @Override
            public void handleError(Throwable throwable)
            {
                LOG.error("JMS message listener error: {}", throwable.getMessage());
            }
        };
    }

    @Bean
    public JmsTemplate defaultJmsTemplate(ConnectionFactory connectionFactory)
    {
        return new JmsTemplate(connectionFactory);
    }
}

下面是听众的代码：

@Component
public class MessagingListener
{
    @Autowired
    private MessageService _messageService;

    @Autowired
    private Validator _validator;

    @JmsListener(destination = "myqueue")
    public void receiveMessage(String messageJson)
    {
        try
        {
            LOG.info("Received message");

            // The following line throws an IOException is the message is not JSON.
            MyMessage myMessage = MAPPER.readvalue(messageJson, MyMessage.class);

            Set<ConstraintViolation<MyMessage>> _validator.validate(myMessage);
            if (CollectionUtils.isNotEmpty(violations))
            {
                String errorMessage = violations.stream()
                        .map(v -> String.join(" : ", v.getPropertyPath().iterator().next().getName(),
                                v.getMessage()))
                LOG.error("Exception occurred while validating the model, details: {}", errorMessage)
                throw new ValidationException(errorMessage);
            }
        }
        catch (IOException e)
        {
            LOG.error("Error parsing message", e);
            throw new ValidationException("Error parsing message, details: " + e.getMessage());
        }
    }
}

当消息被放置在SQS队列中，带有无效的JSON或未通过验证的JSON时，消息会被非常快地接收20次，然后在DLQ上结束。需要做些什么来尊重SQS中的默认可见性超时设置？

Answer 1

在异常的情况下，失败消息的可见性超时通过ChangeMessageViality设置为0，因此SQS将立即发送此消息，即使队列具有不同的visibilityTimeout设置。

这是怎么发生的？

您可以在这里看到，Spring JMS的AbstractMessageListenerContainer简要地执行以下操作：

try {
    invokeListener(session, message); // This is your @JMSListener method
}
catch (JMSException | RuntimeException | Error ex) {
    rollbackOnExceptionIfNecessary(session, ex);
    throw ex;
}
commitIfNecessary(session, message);

在rollbackonexception如果需要方法上，会话。将调用recover（），因为：

1. session.get事务处理（）将始终为false，因为SQS不支持事务处理。请参阅此处。
2. 将返回true，因为您使用CLIENT_ACKNOWLEDGE模式。

最后，SQSSession negative的recover（）会确认消息，这意味着将特定消息的visibilityTimeout设置为0，会导致SQS立即尝试发送该消息。

覆盖此行为的最简单方法是实现CustomJmsListenerContainerFactory

public class CustomMessageListenerContainer extends DefaultMessageListenerContainer {

    public CustomMessageListenerContainer() {
        super();
    }

    @Override
    protected void rollbackOnExceptionIfNecessary() {
        // do nothing, so that "visibilityTimeout" will stay same
    }

}

public class CustomJmsListenerContainerFactory {
    
    @Override
    protected DefaultMessageListenerContainer createContainerInstance() {
        return new CustomMesageListenerContainer();
    }
}

用@Component或者像你在JmsConfig中做的那样，把它变成Springbean：

@Bean
public DefaultJmsListenerContainerFactory jmsListenerContainerFactory(ConnectionFactory connectionFactory) {
    DefaultJmsListenerContainerFactory factory = new CustomJmsListenerContainerFactory();
    factory.setConnectionFactory(connectionFactory);
    // and set other stuff on factory
    return factory;
}

注意：
如果您的应用程序在SQS和JMS中使用其他类型的数据源，请确保为它们使用不同的容器和容器工厂，以便rollback OnExceptionIfNecessary的行为符合预期。