RabbitMQ 如何保證消息的可靠性

確保消息不丟失.png

隊(duì)列持久化

// 隊(duì)列消息持久化
boolean durable = true;
channel.queuDeclare = (ACK_QUEUE_NAME变隔,durable喘落,flase,false,null);

上面的代碼就是進(jìn)行消息持久話茵宪,當(dāng)然還有其他寫法,例如:

    @Bean
    public Queue directProductQueue(){

        return QueueBuilder.durable(隊(duì)列名);

其他寫法不一一贅述瘦棋。
如果隊(duì)列A之前沒(méi)有持久化稀火,重啟RabbitMQ后,隊(duì)列會(huì)消息赌朋,并且凰狞,在代碼里將隊(duì)列A改為了持久化,需要先將原來(lái)的隊(duì)列刪除掉沛慢,否則會(huì)報(bào)錯(cuò)赡若。
持久化后,在控制臺(tái)中會(huì)顯示"D"团甲,這樣的話逾冬,即使重啟RabbitMQ,隊(duì)列A也會(huì)照樣存在。

image.png

消息持久化

隊(duì)列持久化并不能讓消息持久化,如果RabbitMQ宕機(jī)身腻,重啟后产还,持久化后的隊(duì)列還會(huì)存在,因?yàn)橄⒛J(rèn)保存在內(nèi)存中嘀趟,所以消息會(huì)丟失脐区,如果想讓消息不丟失,或者丟失的少她按,最好將消息進(jìn)行持久化牛隅,需要在生產(chǎn)段進(jìn)行配置

  Message message1 = MessageBuilder.withBody(msgBody.getBytes())
                    .setContentType(MessageProperties.CONTENT_TYPE_TEXT_PLAIN)
                    .setContentEncoding("UTF-8")
                    .setCorrelationId(msgId).setDeliveryMode(MessageDeliveryMode.PERSISTENT).build();
            CorrelationData correlationData = new CorrelationData(msgId);
            rabbitTemplate.convertAndSend(exchange, routingKey, message1,correlationData);

以上代碼中,setDeliveryMode(MessageDeliveryMode.PERSISTENT) 就是將消息進(jìn)行了持久化酌泰。即使RabbitMQ宕機(jī)倔叼,消息也不會(huì)全部丟失,為什么不能保證全部不丟失呢宫莱?因?yàn)樵谝环N極端情況下丈攒,例如RabbitMQ在將消息寫入磁盤的過(guò)程中,RabbitMQ宕機(jī)授霸,此時(shí)巡验,還未寫入磁盤的部分消息就會(huì)丟失。

當(dāng)然有很多方法可以保證消息盡可能不丟失碘耳,例如生產(chǎn)者發(fā)送消息后立馬將消息寫入數(shù)據(jù)庫(kù)显设,即使RabbitMQ讓部分消息丟失,我們也可以通過(guò)數(shù)據(jù)庫(kù)里的消息進(jìn)行補(bǔ)償辛辨,例如重發(fā)消息捕捂,但是發(fā)消息時(shí)同時(shí)寫庫(kù),對(duì)性能會(huì)有一些影響斗搞。

發(fā)布確認(rèn)

什么是發(fā)布確認(rèn)指攒,發(fā)布確認(rèn)就是生產(chǎn)者發(fā)布的消息被投遞到指定隊(duì)列后,broker會(huì)通過(guò)回調(diào)函數(shù)告訴生產(chǎn)者消息投遞成功了僻焚,要注意允悦,這只是消息投遞成功了,而不是消費(fèi)成功虑啤。

發(fā)布確認(rèn)是否開(kāi)啟需要自己手動(dòng)設(shè)置隙弛,比如可以在application.yml中設(shè)置如下:

  rabbitmq:
    addresses: xx.xx.xx.x
    port: 5672
    username: xxx
    password: xxxxxxxx
    publisher-confirms: true #是否開(kāi)啟回調(diào)
  • 單個(gè)確認(rèn)
    單個(gè)確認(rèn)發(fā)布屬于同步確認(rèn),發(fā)一條消息確認(rèn)一次狞山,缺點(diǎn)是發(fā)布消息比較慢全闷,這種方式最多提供每秒不超過(guò)數(shù)百條的發(fā)布消息吞吐量。

  • 批量確認(rèn)
    相比于單個(gè)確認(rèn)萍启,批量確認(rèn)極大的提高了吞吐量总珠,但是當(dāng)發(fā)生故障時(shí),不能確定哪條消息出了問(wèn)題,同時(shí)姚淆,批量確認(rèn)也是同步的孕蝉。

  • 異步確認(rèn)
    異步確認(rèn)不會(huì)同步等待broker的確認(rèn)信息,異步響應(yīng)broker的確認(rèn)信息腌逢。
    先貼一下代碼:

@Component
@Slf4j
public class RabbitTemplateConfig implements RabbitTemplate.ConfirmCallback {
    @Autowired
    private RabbitTemplate rabbitTemplate;

    @PostConstruct
    public void initRabbitTemplate() {
        // 設(shè)置生產(chǎn)者消息確認(rèn)
        rabbitTemplate.setConfirmCallback(this);

    }

    /**
     * 消息發(fā)送到 Broker 后觸發(fā)回調(diào)
     *
     * @param correlationData bean
     */
    @Override
    public void confirm(CorrelationData correlationData, boolean ack, String cause) {

        if (ack) {
              // 如果消息被確認(rèn)了降淮,走一套邏輯
        } else {
            //如果消息沒(méi)有被確認(rèn),是否補(bǔ)償?持久化到數(shù)據(jù)庫(kù)還是定期處理搏讶?  correlationData.getId()
        }
    }

對(duì)于消息被確認(rèn)還是沒(méi)有被確認(rèn)的具體處理邏輯需要自己去寫佳鳖,你可以在發(fā)消息前將消息先存入redis或者M(jìn)ySQL,為每一條消息設(shè)置一個(gè)唯一的id(可以用UUID媒惕、雪花算法等等)系吩,就是correlationData.getId(),當(dāng)消息沒(méi)有被確認(rèn)妒蔚,可以拿著這個(gè)唯一的id將完整的消息取出來(lái)穿挨,做消息補(bǔ)償還是只是記錄錯(cuò)誤日志自己定奪。

手動(dòng)ack

消息到達(dá)隊(duì)列后肴盏,準(zhǔn)備被消費(fèi)者消費(fèi)科盛,消息被成功消費(fèi)后,即業(yè)務(wù)處理完成后菜皂,進(jìn)行手動(dòng)ack贞绵,RabbitMQ默認(rèn)是自動(dòng)ack的,就是只要開(kāi)始消費(fèi)恍飘,就會(huì)被自動(dòng)ack榨崩,自動(dòng)ack后,隊(duì)列中對(duì)應(yīng)的這條消息就沒(méi)了章母,生產(chǎn)中最好用手動(dòng)ack母蛛。

 channel.basicAck(message.getMessageProperties().getDeliveryTag(), false);

如果在消費(fèi)過(guò)程中出現(xiàn)了問(wèn)題,可以將消息reject胳施,reject后可以選擇消息重新入隊(duì)或者消息直接被丟棄,下面代碼中的 false 表示不重新入隊(duì)溯祸,如果重新入隊(duì)肢专,可能會(huì)帶來(lái)一個(gè)問(wèn)題舞肆,就是如果這條消息永遠(yuǎn)會(huì)在被消費(fèi)的過(guò)程中產(chǎn)生錯(cuò)誤,那么這條消息就會(huì)不斷地被重新入隊(duì)博杖,會(huì)造成死循環(huán)椿胯。

channel.basicReject(message.getMessageProperties().getDeliveryTag(), false);

死信隊(duì)列

消息在被消費(fèi)的過(guò)程中發(fā)生錯(cuò)誤怎么辦呢,重新入隊(duì)有風(fēng)險(xiǎn)剃根,可以將消息發(fā)到死信隊(duì)列進(jìn)行處理哩盲,不影響原隊(duì)列。

先說(shuō)一下什么是死信,就是由于某些原因?qū)е玛?duì)列中的某些消息無(wú)法被消費(fèi)廉油,這些消息如果沒(méi)有后期的處理惠险,就會(huì)變成死信,用來(lái)處理死信的隊(duì)列就是死信隊(duì)列抒线,當(dāng)然死信隊(duì)列還可以當(dāng)作延遲隊(duì)列用班巩。

設(shè)置死信隊(duì)列的方法可以參考下方代碼:

@Configuration
public class RabbitConfig {

    // 交換機(jī)
    public static final String EXCHANGE_TEST= "exchangeTest";

    // 路由鍵
    public static final String ROUTING_KEY_TEST = "routingKeyTest";

     // 隊(duì)列
    public static final String DIRECT_QUEUE_TEST = "direct.queuetest";



    /**
     * 交換機(jī)
     **/
    @Bean
    public DirectExchange directExchange() {

        return new DirectExchange(EXCHANGE_TEST);
    }

    /**
     * 隊(duì)列
     **/
    @Bean
    public Queue directQueue() {

        return QueueBuilder.durable(DIRECT_QUEUE_TEST)
                //死信交換機(jī)聲明
                .withArgument("x-dead-letter-exchange", DeadMQConfig.DIRECT_DEAD_EXCHANGE_NAME)
                //死信消息的路由key
                .withArgument("x-dead-letter-routing-key", DeadMQConfig.DIRECT_DEAD_ROUTING_KEY_NAME)
                .build();

    }

    /**
     * Binding,將該routing key的消息通過(guò)交換機(jī)轉(zhuǎn)發(fā)到該隊(duì)列
     */
    @Bean
    public Binding directBinding() {

        return BindingBuilder.bind(directQueue()).to(directExchange()).with(ROUTING_KEY_TEST );

    }


}

參考:
[1] 尚硅谷-《消息中間件RabbitMQ》
[2] https://blog.csdn.net/qq_32662795/article/details/88742397
[3] https://www.cnblogs.com/he-erduo/p/13558308.html

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市嘶炭,隨后出現(xiàn)的幾起案子抱慌,更是在濱河造成了極大的恐慌,老刑警劉巖眨猎,帶你破解...
    沈念sama閱讀 216,402評(píng)論 6 499
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件抑进,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡睡陪,警方通過(guò)查閱死者的電腦和手機(jī)寺渗,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,377評(píng)論 3 392
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)兰迫,“玉大人户秤,你說(shuō)我怎么就攤上這事〈” “怎么了鸡号?”我有些...
    開(kāi)封第一講書(shū)人閱讀 162,483評(píng)論 0 353
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)须鼎。 經(jīng)常有香客問(wèn)我鲸伴,道長(zhǎng),這世上最難降的妖魔是什么晋控? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 58,165評(píng)論 1 292
  • 正文 為了忘掉前任汞窗,我火速辦了婚禮,結(jié)果婚禮上赡译,老公的妹妹穿的比我還像新娘仲吏。我一直安慰自己,他們只是感情好蝌焚,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,176評(píng)論 6 388
  • 文/花漫 我一把揭開(kāi)白布裹唆。 她就那樣靜靜地躺著,像睡著了一般只洒。 火紅的嫁衣襯著肌膚如雪许帐。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書(shū)人閱讀 51,146評(píng)論 1 297
  • 那天毕谴,我揣著相機(jī)與錄音成畦,去河邊找鬼距芬。 笑死,一個(gè)胖子當(dāng)著我的面吹牛循帐,可吹牛的內(nèi)容都是我干的框仔。 我是一名探鬼主播,決...
    沈念sama閱讀 40,032評(píng)論 3 417
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼拄养,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼存和!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起衷旅,我...
    開(kāi)封第一講書(shū)人閱讀 38,896評(píng)論 0 274
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤捐腿,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后柿顶,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體茄袖,經(jīng)...
    沈念sama閱讀 45,311評(píng)論 1 310
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,536評(píng)論 2 332
  • 正文 我和宋清朗相戀三年嘁锯,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了宪祥。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 39,696評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡家乘,死狀恐怖蝗羊,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情仁锯,我是刑警寧澤耀找,帶...
    沈念sama閱讀 35,413評(píng)論 5 343
  • 正文 年R本政府宣布,位于F島的核電站业崖,受9級(jí)特大地震影響野芒,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜双炕,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,008評(píng)論 3 325
  • 文/蒙蒙 一狞悲、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧妇斤,春花似錦摇锋、人聲如沸。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 31,659評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至顷编,卻和暖如春戚炫,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背媳纬。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 32,815評(píng)論 1 269
  • 我被黑心中介騙來(lái)泰國(guó)打工双肤, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人钮惠。 一個(gè)月前我還...
    沈念sama閱讀 47,698評(píng)論 2 368
  • 正文 我出身青樓茅糜,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親素挽。 傳聞我的和親對(duì)象是個(gè)殘疾皇子蔑赘,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,592評(píng)論 2 353

推薦閱讀更多精彩內(nèi)容

  • [TOC] 之前我們簡(jiǎn)單介紹了rabbitmq的功能。他的作用就是方便我們的消息解耦预明。緊接著問(wèn)題就會(huì)暴露出來(lái)缩赛。解耦...
    zxhtom閱讀 276評(píng)論 0 1
  • 一條消費(fèi)成功被消費(fèi)經(jīng)歷了生產(chǎn)者->MQ->消費(fèi)者,因此在這三個(gè)步驟中都有可能造成消息丟失撰糠。 一 消息生產(chǎn)者沒(méi)有把消...
    cuixiaoyan閱讀 325評(píng)論 0 0
  • 一條消費(fèi)成功被消費(fèi)經(jīng)歷了生產(chǎn)者->MQ->消費(fèi)者酥馍,因此在這三個(gè)步驟中都有可能造成消息丟失。 一 消息生產(chǎn)者沒(méi)有把消...
    Java旅途閱讀 1,367評(píng)論 0 2
  • RabbitMQ核心基礎(chǔ)概念 Server:又稱之為Broker阅酪,接受客戶端的連接旨袒,實(shí)現(xiàn)AMQP實(shí)體服務(wù)。 Con...
    Java大寶寶閱讀 3,226評(píng)論 0 2
  • 表情是什么术辐,我認(rèn)為表情就是表現(xiàn)出來(lái)的情緒砚尽。表情可以傳達(dá)很多信息。高興了當(dāng)然就笑了辉词,難過(guò)就哭了必孤。兩者是相互影響密不可...
    Persistenc_6aea閱讀 124,915評(píng)論 2 7