解決rocketmq-spring-boot-starter導致的多消費者實例重復消費問題
更新時間：2024年06月18日 08:42:08 作者：lipfff
這篇文章主要介紹了解決rocketmq-spring-boot-starter導致的多消費者實例重復消費問題,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教
問題描述
在使用rocketMQ集群模式消費的時候（通過springboot整合的依賴操作）
發(fā)現(xiàn)在一臺服務器啟動多個消費者實例后，消息進行了重復消費，但是在不同的服務器部署消費者實例后，消息能正常消費。
背景知識
rocketMQ的消費模式有兩種：
- 1.負載均衡模式 消費者采用負載均衡方式消費消息，多個消費者（服務啟動多個，本地多個springboot加載類啟動）共同消費隊列消息，每個消費者處理的消息不同
- 2.廣播模式 消費者采用廣播的方式消費消息，每個消費者消費的消息都是相同的
本地代碼
依賴版本
<properties>
<rocketmq-spring-boot-starter-version>2.0.3</rocketmq-spring-boot-starter-version>
</properties>
<dependency>
<groupId>org.apache.rocketmq</groupId>
<artifactId>rocketmq-spring-boot-starter</artifactId>
<version>${rocketmq-spring-boot-starter-version}</version>
</dependency>
消費者：
package cn.lpf.mq;
import lombok.extern.slf4j.Slf4j;
import org.apache.rocketmq.spring.annotation.ConsumeMode;
import org.apache.rocketmq.spring.annotation.ExtRocketMQTemplateConfiguration;
import org.apache.rocketmq.spring.annotation.MessageModel;
import org.apache.rocketmq.spring.annotation.RocketMQMessageListener;
import org.apache.rocketmq.spring.core.RocketMQListener;
import org.springframework.stereotype.Component;
import java.util.concurrent.atomic.AtomicInteger;
/**
* @auth lipf
* @date 2021/1/16 16:27
*/
@Slf4j
@Component
//,messageModel = MessageModel.CLUSTERING
//,consumeMode = ConsumeMode.ORDERLY
@RocketMQMessageListener(consumerGroup = "huanlv-group", topic = "miniapp_service_topic")
public class HotelServiceConsumer implements RocketMQListener<String> {
private AtomicInteger count=new AtomicInteger(0);
@Override
public void onMessage(String message) {
log.info("HotelServiceConsumer-->Receive message：{}",message);
long start = System.currentTimeMillis();
try {
Thread.sleep(10);
} catch (InterruptedException e) {
e.printStackTrace();
}
long end = System.currentTimeMillis();
log.info("HotelServiceConsumer-->handler message：{} ms，{} s",(end-start),(end-start)/1000);
}
}
消息積壓并重復消息
觀察console客戶端，如下：
原因分析
通過使用rocket客戶端消費是沒問題的：
/**
* 消息的接受者
*/
public class BaseConsumer {
public static void main(String[] args) throws Exception {
//1.創(chuàng)建消費者Consumer，制定消費者組名
DefaultMQPushConsumer consumer = new DefaultMQPushConsumer("huanlv-group");
//2.指定Nameserver地址
consumer.setNamesrvAddr("172.16.100.11:9876");
//3.訂閱主題Topic和Tag
consumer.subscribe("miniapp_service_topic", "*");
//設定消費模式：負載均衡|廣播模式
consumer.setMessageModel(MessageModel.CLUSTERING);
// consumer.setMessageModel(MessageModel.BROADCASTING);
//4.設置回調函數(shù)，處理消息
consumer.registerMessageListener(new MessageListenerConcurrently() {
//接受消息內(nèi)容
@Override
public ConsumeConcurrentlyStatus consumeMessage(List<MessageExt> msgs, ConsumeConcurrentlyContext context) {
for (MessageExt msg : msgs) {
System.out.println("consumeThread=" + Thread.currentThread().getName() + "," + new String(msg.getBody()));
}
return ConsumeConcurrentlyStatus.CONSUME_SUCCESS;
}
});
//5.啟動消費者consumer
consumer.start();
}
}
所以這個時候懷疑是springboot整合rockemq的版本有問題，把版本有2.0.3換成了2.2.0問題解決掉，客戶端注入ClientId規(guī)則發(fā)現(xiàn)變化，消息正常消費：
<properties>
<rocketmq-spring-boot-starter-version>2.2.0</rocketmq-spring-boot-starter-version>
</properties>
總結
以上為個人經(jīng)驗，希望能給大家一個參考，也希望大家多多支持腳本之家。
相關文章
Springboot整合redis實現(xiàn)發(fā)布訂閱功能介紹步驟
發(fā)布訂閱作為一種設計思想在很多開源組件中都有體現(xiàn)，比如大家熟知的消息中間件等，可謂把發(fā)布訂閱這一思想體現(xiàn)的淋漓盡致了2022-09-09
SpringMVC中@ModelAttribute注解的使用教程
在SpringMVC中,我們可以通過使用@ModelAttribute注解標記方法,實現(xiàn)類似于Struts2中Preparable攔截器的效果,這篇文章主要給大家介紹了關于SpringMVC中@ModelAttribute注解使用的相關資料,需要的朋友可以參考下2021-08-08
VSCode新手教程之配置Java環(huán)境的詳細教程
這篇文章主要給大家介紹了關于VSCode新手教程之配置Java環(huán)境的詳細教程,工欲善其事必先利其器,想要工作順利我們先搭建好JAVA的開發(fā)環(huán)境,需要的朋友可以參考下2023-10-10
這篇文章主要為大家介紹了Java實現(xiàn)微信支付的簽名算法實現(xiàn)示例,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進步,早日升職加薪2023-12-12
深度分析MybatisPlus查詢結果映射失敗@TableField失效解決辦法
本文針對SpringBoot使用MybatisPlus框架時出現(xiàn)的查詢結果映射失敗問題進行深入分析,通過源碼解析,闡述了@TableField注解失效的原因,并提出了四種有效的解決方案,感興趣的朋友一起看看吧2025-07-07
這篇文章主要介紹了Spring源碼解析后置處理器梳理總結，在前面幾篇文章中梳理了Spring中bean的創(chuàng)建過程，在這個過程中各式各樣的后置處理器發(fā)揮了不同的作用，可以說后置處理器貫穿了bean的實例化以及初始化過程2022-07-07
本文主要介紹了mybatisFlex各種鏈式sql寫法,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友們下面隨著小編來一起學習學習吧2025-04-04
為了能夠更快更清晰地搞清對象之間的調用關系，我經(jīng)常需要用到序列圖。手動畫序列圖還是很麻煩費時的，不過?IDEA?提供了一個叫做SequenceDiagram?的插件幫助我們解決這個問題。通SequenceDiagram?這個插件，我們一鍵可以生成時序圖2022-01-01
本文介紹了Spring Security的密碼編碼機制及其在Maven項目管理中的配置方式,本文結合實例代碼給大家介紹的非常詳細,對大家的學習或工作具有一定的參考借鑒價值,需要的朋友參考下吧2025-10-10
springboot動態(tài)加載jar包動態(tài)配置實例詳解
這篇文章主要給大家介紹了關于springboot動態(tài)加載jar包動態(tài)配置的相關資料,在項目開發(fā)的過程中,有時候需要動態(tài)靈活的加載某個jar包并執(zhí)行其里面的方法的時候,需要的朋友可以參考下2023-11-11