架構(gòu)、分布式仪媒、日志隊(duì)列,就是一個日志收集的功能谢鹊,只不過中間加了一個Redis做消息隊(duì)列算吩。
為什么需要消息隊(duì)列?
當(dāng)系統(tǒng)中出現(xiàn)“生產(chǎn)“和“消費(fèi)“的速度或穩(wěn)定性等因素不一致的時候佃扼,就需要消息隊(duì)列偎巢,作為抽象層,彌合雙方的差異兼耀。
比如我們系統(tǒng)中常見的郵件压昼、短信發(fā)送求冷,把這些不需要及時響應(yīng)的功能寫入隊(duì)列,異步處理請求窍霞,減少響應(yīng)時間匠题。
如何實(shí)現(xiàn)?
成熟的JMS消息隊(duì)列中間件產(chǎn)品市面上有很多但金,但是基于目前項(xiàng)目的架構(gòu)以及部署情況韭山,我們采用Redis做消息隊(duì)列。
為什么用Redis冷溃?
Redis中l(wèi)ist數(shù)據(jù)結(jié)構(gòu)钱磅,具有“雙端隊(duì)列”的特性,同時redis具有持久數(shù)據(jù)的能力似枕,因此redis實(shí)現(xiàn)分布式隊(duì)列是非常安全可靠的盖淡。
它類似于JMS中的“Queue”,只不過功能和可靠性(事務(wù)性)并沒有JMS嚴(yán)格凿歼。Redis本身的高性能和"便捷的"分布式設(shè)計(jì)(replicas,sharding),可以為實(shí)現(xiàn)"分布式隊(duì)列"提供了良好的基礎(chǔ)禁舷。
提供者端
項(xiàng)目采用第三方redis插件spring-data-redis,不清楚如何使用的請自行谷歌或者百度毅往。
redis.properties:
redis配置:
切面日志配置(偽代碼):
消費(fèi)者端
Redis配置:
監(jiān)聽接口:
監(jiān)聽實(shí)現(xiàn):
Q&A
【問題一】為什么使用Redis牵咙?
上面其實(shí)已經(jīng)有做說明,盡管市面上有許多很穩(wěn)定的產(chǎn)品攀唯,比如可能大家會想到的Kafka洁桌、RabbitMQ以及RocketMQ。但是由于項(xiàng)目本身使用了Redis做分布式緩存侯嘀,基于省事可行的原則就選定了Redis另凌。
【問題二】日志數(shù)據(jù)如何存儲?
原則上是不建議存儲到關(guān)系數(shù)據(jù)庫的戒幔,比如MySql吠谢,畢竟產(chǎn)生的日志數(shù)量是巨大的,建議存儲到Elasticsearch等非關(guān)系型數(shù)據(jù)庫诗茎。
【問題三】切面日志收集是如何實(shí)現(xiàn)的工坊?
切面日志需要引入spring-aspects相關(guān)Jar包,并且配置使Spring采用CGLIB代理 敢订。
更多精彩可詢462403503或點(diǎn)擊下方藍(lán)色字體了解王污。