SpringBoot整合RabbitMQ保证消息的可靠的投递及消费

开发 架构
Spring.rabbitmq.publisher-confirm-type及spring.rabbitmq.publisher-returns 的配置值。

环境:SpringBoot2.7.9

消息丢失场景

  1. 生产者丢失消息
    生产者发出的数据由于网络原因没有到底MQ Server丢失
  2. MQ Server丢消息
    由于消息队列没有持久化或者是消息没有持久化,在Server重启后消息丢失
  3. 消费者丢消息
    接收到消息后,业务还没有处理完成,服务宕机(当你是自动ACK)。

生产者丢失解决方案

  1. 通过事务(不推荐)
  2. 确认机制(推荐)

这里只讲如何通过确认机制保证生产者不丢失消息

  • 引入依赖

<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-amqp</artifactId>
</dependency>

  • 声明交换机及队列

@Bean
public TopicExchange topicExchange() {
return new TopicExchange("akf.exchange", true, false) ;
}
@Bean
public Queue queue() {
return new Queue("akf.queue", true, false, false) ;
}
@Bean
public Binding binding() {
return BindingBuilder.bind(queue()).to(topicExchange()).with("akf.#") ;
}

  • RabbitMQ配置

spring:
rabbitmq:
host: localhost
port: 5672
username: guest
password: guest
virtualHost: test
publisherConfirmType: correlated
publisherReturns: true
template:
mandatory: true

注意:spring.rabbitmq.publisher-confirm-type及spring.rabbitmq.publisher-returns 的配置值。

接下来是为RabbitTemplate配置对应的Callback,Publisher确认回调,Publisher返回回调。

  1. 确认回调
    当消息发送到了交换机则ack=true,当消息无法发送到交换机则ack=false。
  2. 返回回调
    当消息能够发送到交换机,但是不能路由到队列则会调用该return回调。

RabbitTemplate是单例的可以通过两种方式配置对应的回调。

  1. 自定义RabbitTemplate。
  2. 通过AWare接口获取RabbitTemplate配置。

这里只讲通过AWare接口配置回调。

  • 配置Callback

@Component
public class ConfigRabbitTemplate implements ApplicationContextAware {

@Override
public void setApplicationContext(ApplicationContext context) throws BeansException {
RabbitTemplate rabbitTemplate = context.getBean(RabbitTemplate.class) ;
rabbitTemplate.setConfirmCallback(new ConfirmCallback() {
@Override
public void confirm(CorrelationData correlationData, boolean ack, String cause) {
System.out.println("correlation: " + correlationData) ;
if (ack) {
System.out.println("消息发送到交换机") ;
} else {
System.out.println("消息发送失败 - " + ", cause" + cause) ;
}
}
});
rabbitTemplate.setReturnsCallback(new ReturnsCallback() {
@Override
public void returnedMessage(ReturnedMessage returned) {
System.out.println(returned.getExchange() + ", " + returned.getRoutingKey() + ", " + returned.getReplyCode() + ", " + returned.getMessage().toString()) ;
}
});
}

}

使用错误的交换机和错误的路由key分别测试即可以看到上面的输出信息了。

MQ Server丢消息

在通过@Bean声明交换机和队列时设置持久性,在消息上设置持久化。

@Bean
public TopicExchange topicExchange() {
// 这里的第二个参数就是设置是否持久化,如果设置为false,当服务重启交换机将丢失
// 第三个参数是否自动删除,当不再使用该交换机时会自动删除该交换机
return new TopicExchange("akf.exchange", true, false) ;
}
@Bean
public Queue queue() {
// 第二个参数true设置队列是持久化的,当服务重启队列不会丢失
return new Queue("akf.queue", true, false, false) ;
}

设置消息持久化。

Message message = MessageBuilder.withBody("Hello".getBytes())
// 设置消息投递模式为持久化的(默认不设置就是持久化的)
.setDeliveryMode(MessageDeliveryMode.PERSISTENT)
.build() ;

消费者丢消息

关闭自动应答机制。

默认是自动应答,当消息监听方法中没有异常时则正常应答,当发生异常时,在默认情况下会重新入队列(这样就会出现死循环)。

spring:
rabbitmq:
host: localhost
port: 5672
username: guest
password: guest
virtualHost: test
publisherConfirmType: correlated
publisherReturns: true
listener:
simple:
acknowledgeMode: manual #设置为手动应答

消息监听。

@RabbitListener(queues = {"akf.queue"})
public void onMessage(Message message, Channel channel) throws Exception {
try {
System.out.println("接收到消息: " + new String(message.getBody()));
// ... 这里处理我们的业务代码
// 当消费者把消息消费成功,再手动应答RabbitMQ
channel.basicAck(message.getMessageProperties().getDeliveryTag(), false);
} catch (Exception e) {
// 如果发生了异常,我们一般的处理是直接扔掉死信队列,一般这里出现错误都是消息有问题
// 如果消息出现问题,你重试再入队列是无意义的
}
}

消息重试

如果消息消费时出现错误,你又希望能够通过重试来尽可能的处理掉该消息,Spring也提供了相应的重试机制。

修改配置:

spring:
rabbitmq:
host: localhost
port: 5672
username: guest
password: guest
virtualHost: test
publisherConfirmType: correlated
publisherReturns: true
listener:
simple:
acknowledgeMode: auto
concurrency: 1
retry:
# 开启重试
enabled: true
# 延迟1s后开始重试
initialInterval: 1000
# 每次消息重试的间隔乘数
multiplier: 3
# 2次间的重试最大间隔时间
maxInterval: 20000
maxAttempts: 4 #重试4次,1s, 3s, 9s
stateless: true #如果消息处理中存在事务则需要将其设置为false

如果只是做上面的配置,重试指定次数后消息将会被丢弃,这是默认行为。Spring提供了 MessageRecoverer接口来决定消息如何处理。默认Spring提供如下几种实现:

  1. ImmediateRequeueMessageRecoverer
  2. RejectAndDontRequeueRecoverer
  3. RepublishMessageRecoverer

我们只需要定义一个Bean为MessageRecoverer即可,这里我们就用Spring提供的RepublishMessageRecoverer重新发布消息。

@Bean
public MessageRecoverer messageRecoverer(RabbitTemplate rabbitTemplate) {
return new RepublishMessageRecoverer(rabbitTemplate, "error.exchange", "error") ;
}

这里将消息重新发布一个专门的队列(重试指定次数后)。

责任编辑:姜华 来源: 今日头条
相关推荐

2020-10-14 08:36:10

RabbitMQ消息

2021-04-27 07:52:18

RocketMQ消息投递

2021-02-02 11:01:31

RocketMQ消息分布式

2023-12-04 09:23:49

分布式消息

2020-09-27 07:44:08

RabbitMQ投递消息

2023-11-27 17:29:43

Kafka全局顺序性

2021-09-07 10:38:37

RabbitMQ 高可用消费

2023-11-30 18:03:02

TCP传输

2021-04-15 09:17:01

SpringBootRocketMQ

2022-12-14 08:23:30

2022-01-10 11:58:51

SpringBootPulsar分布式

2020-03-12 09:34:05

Redis数据技术

2009-08-27 10:01:27

ibmdw云计算

2023-08-08 08:28:03

消息消费端Spring

2020-07-01 07:29:47

SpringbootRabbitmq服务器

2020-09-14 11:50:21

SpringBootRabbitMQJava

2023-09-04 08:00:53

提交事务消息

2022-07-26 20:00:35

场景RabbitMQMQ

2022-08-02 11:27:25

RabbitMQ消息路由

2013-12-12 16:14:21

storm入门教程storm消息处理
点赞
收藏

51CTO技术栈公众号