ActiveMQ消息數(shù)據(jù)持久化

一蔽介、 問題提出

場(chǎng)景問題:服務(wù)器斷電重啟干花,未被消費(fèi)的消息是否會(huì)在重啟之后被繼續(xù)消費(fèi)绪氛?
兩種選擇:非持久性模式/持久性模式
非持久性模式: 服務(wù)器斷電(關(guān)閉)之后闻书,使用非持久性模式時(shí)名斟,沒有被消費(fèi)的消息不會(huì)繼續(xù)消費(fèi)全部丟失;
程序會(huì)報(bào)一個(gè)連接關(guān)閉異常停止運(yùn)行魄眉,繼續(xù)啟動(dòng)服務(wù)器運(yùn)行程序砰盐,不會(huì)接收任何消息。
持久性模式: 服務(wù)器斷電(關(guān)閉)后坑律,使用持久性模式時(shí)岩梳,沒有被消費(fèi)的消息會(huì)繼續(xù)消費(fèi);
程序也會(huì)報(bào)連接關(guān)閉異常晃择,但再次啟動(dòng)服務(wù)器和程序后冀值,接收方還能繼續(xù)原來的消息再次接收。

二宫屠、 ActiveMQ的幾種存儲(chǔ)模式選擇
  • AMQ消息存儲(chǔ) (默認(rèn)的消息存儲(chǔ))
    • 基于文件存儲(chǔ)的消息數(shù)據(jù)庫(kù)列疗,不依賴于第三方數(shù)據(jù)庫(kù)
  • KahaDB 消息存儲(chǔ)(提供容量的提升和恢復(fù)能力)
  • 消息存儲(chǔ)機(jī)制
  • JDBC 消息存儲(chǔ)(消息基于JDBC存儲(chǔ))
  • 使用Mysql或Oracle數(shù)據(jù)庫(kù)存儲(chǔ)消息
  • Memory 消息存儲(chǔ)(基于內(nèi)容的消息存儲(chǔ))
    • ActiveMQ支持將消息保存到內(nèi)存中,將Broker的“prsistent” 屬性設(shè)置為“false”浪蹂。
三抵栈、本文主要記錄將ActiveMQ消息持久化到Mysql數(shù)據(jù)庫(kù)
1. 將以下Jar包添加到到%ACTIVEMQ_HOME%\lib下面
  • commons-dbcp-1.4.jar
  • commons-pool-1.6.jar
  • mysql-connector-java-5.1.30.jar
2. 修改ActiveMQ的conf目錄下的activemq.xml文件告材,修改數(shù)據(jù)持久化的方式

在添加如下配置時(shí),需要注意添加位置

<broker>
<persistenceAdapter>
<!--createTablesOnStartup="true"表示在第一次啟動(dòng)時(shí)自動(dòng)建立表結(jié)構(gòu)古劲,再次啟動(dòng)時(shí)斥赋,應(yīng)該改為false-->
<jdbcPersistenceAdapter dataSource="#mysql-ds" createTablesOnStartup="true"/>
</persistenceAdapter>
</broker>
persistenceAdapter.png
<beans>
<bean id="mysql-ds" class="org.apache.commons.dbcp.BasicDataSource" destroy-method="close">
        <property name="driverClassName" value="com.mysql.jdbc.Driver"/>
        <property name="url" value="jdbc:mysql://localhost/activemq?relaxAutoCommit=true"/>
        <property name="username" value="root"/>
        <property name="password" value="root"/>
        <property name="maxActive" value="200"/>
        <property name="poolPreparedStatements" value="true"/>
    </bean>
 </beans>
datasource.png
3. 啟動(dòng)ActiveMQ,分析數(shù)據(jù)表結(jié)構(gòu)

在啟動(dòng)ActiveMQ之后产艾,會(huì)在數(shù)據(jù)庫(kù)<activemq>中建立三張表activemq_acks灿渴、activemq_lockactivemq_msgs

  1. activemq_acks:用于存儲(chǔ)訂閱關(guān)系胰舆。如果是持久化Topic,訂閱者和服務(wù)器的訂閱關(guān)系在這個(gè)表保存蹬挤。
  • CONTAINER:消息的目的地
  • SUB_DEST:如果是使用static集群缚窿,這個(gè)字段會(huì)有集群其他系統(tǒng)的信息
  • CLIENT_ID:每個(gè)訂閱者客戶端ID
  • SUB_NAME:訂閱者名稱
  • SELECTOR:選擇器,可以選擇只消費(fèi)滿足條件的消息焰扳。條件可以用自定義屬性實(shí)現(xiàn)倦零,可支持多屬性and和or操作
  • LAST_ACKED_ID:記錄消費(fèi)過的消息的id。
  • PRIORITY:優(yōu)先級(jí)
  • XID:
  1. activemq_lock:用于記錄哪一個(gè)Broker是Master Broker吨悍。這張表只有在集群環(huán)境中才會(huì)用到扫茅,在集群中,只能有一個(gè)Broker來接收消息育瓜,那么這個(gè)Broker就是主Broker葫隙,其他的作為從Broker,用來備份等待躏仇。
  • ID:主鍵
  • TIME:時(shí)間
  • BROKER_NAME:Broker名稱
  1. activemq_msgs:用于存儲(chǔ)消息恋脚,Topic和Queue消息都會(huì)保存在這張表中
  • ID:自增主鍵
  • CONTAINER:容器名稱
  • MSGID_PROD:消息發(fā)送者客戶端的主鍵
  • MSGID_SEQ:發(fā)送消息的順序,msgid_prod+msg_seq可以組成jms的messageid
  • EXPIRATION:消息的過期時(shí)間焰手,存儲(chǔ)的是從1970-01-01到現(xiàn)在的毫秒數(shù)
  • MSG:消息本體的java序列化對(duì)象的二進(jìn)制數(shù)據(jù)
  • PRIORITY:優(yōu)先級(jí)糟描,從0-9,數(shù)值越大優(yōu)先級(jí)越高
參考:
  1. ActiveMQ 數(shù)據(jù)持久化
  2. ActiveMQ服務(wù)器數(shù)據(jù)遷移的一點(diǎn)心得
  3. activemq-queue-Browser
  4. ActiveMQ簡(jiǎn)介
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末书妻,一起剝皮案震驚了整個(gè)濱河市船响,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌躲履,老刑警劉巖见间,帶你破解...
    沈念sama閱讀 211,123評(píng)論 6 490
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異工猜,居然都是意外死亡缤剧,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,031評(píng)論 2 384
  • 文/潘曉璐 我一進(jìn)店門域慷,熙熙樓的掌柜王于貴愁眉苦臉地迎上來荒辕,“玉大人汗销,你說我怎么就攤上這事〉种希” “怎么了弛针?”我有些...
    開封第一講書人閱讀 156,723評(píng)論 0 345
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)李皇。 經(jīng)常有香客問我削茁,道長(zhǎng),這世上最難降的妖魔是什么掉房? 我笑而不...
    開封第一講書人閱讀 56,357評(píng)論 1 283
  • 正文 為了忘掉前任茧跋,我火速辦了婚禮,結(jié)果婚禮上卓囚,老公的妹妹穿的比我還像新娘瘾杭。我一直安慰自己,他們只是感情好哪亿,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,412評(píng)論 5 384
  • 文/花漫 我一把揭開白布粥烁。 她就那樣靜靜地躺著,像睡著了一般蝇棉。 火紅的嫁衣襯著肌膚如雪讨阻。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 49,760評(píng)論 1 289
  • 那天篡殷,我揣著相機(jī)與錄音钝吮,去河邊找鬼。 笑死板辽,一個(gè)胖子當(dāng)著我的面吹牛搀绣,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播戳气,決...
    沈念sama閱讀 38,904評(píng)論 3 405
  • 文/蒼蘭香墨 我猛地睜開眼链患,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來了瓶您?” 一聲冷哼從身側(cè)響起麻捻,我...
    開封第一講書人閱讀 37,672評(píng)論 0 266
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎呀袱,沒想到半個(gè)月后贸毕,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 44,118評(píng)論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡夜赵,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,456評(píng)論 2 325
  • 正文 我和宋清朗相戀三年明棍,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片寇僧。...
    茶點(diǎn)故事閱讀 38,599評(píng)論 1 340
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡摊腋,死狀恐怖沸版,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情兴蒸,我是刑警寧澤视粮,帶...
    沈念sama閱讀 34,264評(píng)論 4 328
  • 正文 年R本政府宣布,位于F島的核電站橙凳,受9級(jí)特大地震影響蕾殴,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜岛啸,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,857評(píng)論 3 312
  • 文/蒙蒙 一钓觉、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧坚踩,春花似錦荡灾、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,731評(píng)論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)芬首。三九已至赴捞,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間郁稍,已是汗流浹背赦政。 一陣腳步聲響...
    開封第一講書人閱讀 31,956評(píng)論 1 264
  • 我被黑心中介騙來泰國(guó)打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留耀怜,地道東北人恢着。 一個(gè)月前我還...
    沈念sama閱讀 46,286評(píng)論 2 360
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像财破,于是被迫代替她去往敵國(guó)和親掰派。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,465評(píng)論 2 348

推薦閱讀更多精彩內(nèi)容

  • Spring Cloud為開發(fā)人員提供了快速構(gòu)建分布式系統(tǒng)中一些常見模式的工具(例如配置管理左痢,服務(wù)發(fā)現(xiàn)靡羡,斷路器,智...
    卡卡羅2017閱讀 134,628評(píng)論 18 139
  • 事務(wù)jms中事務(wù)分為生產(chǎn)者和消費(fèi)者兩塊俊性,消息的生產(chǎn)和消費(fèi)不能包含在同一個(gè)事務(wù)中略步。 生產(chǎn)者:在事務(wù)狀態(tài)下進(jìn)行發(fā)送操作...
    米刀靈閱讀 2,352評(píng)論 0 4
  • 為了避免意外宕機(jī)以后丟失信息,需要做到重啟后可以恢復(fù)消息隊(duì)列定页,消息系統(tǒng)一般都會(huì)采用持久化機(jī)制趟薄。ActiveMQ的消...
    曹振華閱讀 2,915評(píng)論 0 4
  • 背景介紹 Kafka簡(jiǎn)介 Kafka是一種分布式的,基于發(fā)布/訂閱的消息系統(tǒng)典徊。主要設(shè)計(jì)目標(biāo)如下: 以時(shí)間復(fù)雜度為O...
    高廣超閱讀 12,826評(píng)論 8 167
  • 分布式開放消息系統(tǒng)(RocketMQ)的原理與實(shí)踐 來源:http://www.reibang.com/p/453...
    meng_philip123閱讀 12,902評(píng)論 6 104