1 前言
平常的項(xiàng)目中多多少少都會使用到緩存,因?yàn)橐恍?shù)據(jù)我們沒有必要每次查詢的時候都去查詢到數(shù)據(jù)庫。
特別是高 QPS 的系統(tǒng)碧囊,每次都去查詢數(shù)據(jù)庫树灶,對于你的數(shù)據(jù)庫來說將是災(zāi)難。
今天我們不牽涉多級緩存的知識糯而,就把系統(tǒng)使用到的緩存方案天通,不管是一級還是多級的都統(tǒng)稱為緩存,主要是為了講述使用緩存的時候可能會遇到的一些問題以及一些解決辦法熄驼。
我們使用緩存時像寒,我們的業(yè)務(wù)系統(tǒng)大概的調(diào)用流程如下圖:
當(dāng)我們查詢一條數(shù)據(jù)時,先去查詢緩存瓜贾,如果緩存有就直接返回诺祸,如果沒有就去查詢數(shù)據(jù)庫,然后返回祭芦。這種情況下就可能會出現(xiàn)一些現(xiàn)象筷笨。
2 緩存穿透
2.1 什么是緩存穿透
正常情況下,我們?nèi)ゲ樵償?shù)據(jù)都是存在龟劲。
那么請求去查詢一條壓根兒數(shù)據(jù)庫中根本就不存在的數(shù)據(jù)胃夏,也就是緩存和數(shù)據(jù)庫都查詢不到這條數(shù)據(jù),但是請求每次都會打到數(shù)據(jù)庫上面去昌跌。
這種查詢不存在數(shù)據(jù)的現(xiàn)象我們稱為緩存穿透仰禀。
2.2 穿透帶來的問題
試想一下,如果有黑客會對你的系統(tǒng)進(jìn)行攻擊蚕愤,拿一個不存在的id 去查詢數(shù)據(jù)答恶,會產(chǎn)生大量的請求到數(shù)據(jù)庫去查詢∑加眨可能會導(dǎo)致你的數(shù)據(jù)庫由于壓力過大而宕掉亥宿。
2.3 解決辦法
2.3.1 緩存空值
之所以會發(fā)生穿透,就是因?yàn)榫彺嬷袥]有存儲這些空數(shù)據(jù)的key砂沛。從而導(dǎo)致每次查詢都到數(shù)據(jù)庫去了。
那么我們就可以為這些key對應(yīng)的值設(shè)置為null 丟到緩存里面去曙求。后面再出現(xiàn)查詢這個key 的請求的時候碍庵,直接返回null 。
這樣悟狱,就不用在到數(shù)據(jù)庫中去走一圈了静浴,但是別忘了設(shè)置過期時間。
2.3.2 BloomFilter
BloomFilter 類似于一個hbase set 用來判斷某個元素(key)是否存在于某個集合中挤渐。
這種方式在大數(shù)據(jù)場景應(yīng)用比較多苹享,比如 Hbase 中使用它去判斷數(shù)據(jù)是否在磁盤上。還有在爬蟲場景判斷url 是否已經(jīng)被爬取過。
這種方案可以加在第一種方案中得问,在緩存之前在加一層 BloomFilter 囤攀,在查詢的時候先去 BloomFilter 去查詢 key 是否存在,如果不存在就直接返回宫纬,存在再走查緩存 -> 查 DB焚挠。
流程圖如下:
2.4 如何選擇
針對于一些惡意攻擊,攻擊帶過來的大量key 是不存在的漓骚,那么我們采用第一種方案就會緩存大量不存在key的數(shù)據(jù)蝌衔。
此時我們采用第一種方案就不合適了,我們完全可以先對使用第二種方案進(jìn)行過濾掉這些key蝌蹂。
針對這種key異常多噩斟、請求重復(fù)率比較低的數(shù)據(jù),我們就沒有必要進(jìn)行緩存孤个,使用第二種方案直接過濾掉剃允。
而對于空數(shù)據(jù)的key有限的,重復(fù)率比較高的硼身,我們則可以采用第一種方式進(jìn)行緩存硅急。
3 緩存擊穿
3.1 什么是擊穿
緩存擊穿是我們可能遇到的第二個使用緩存方案可能遇到的問題。
在平常高并發(fā)的系統(tǒng)中佳遂,大量的請求同時查詢一個 key 時营袜,此時這個key正好失效了,就會導(dǎo)致大量的請求都打到數(shù)據(jù)庫上面去丑罪。這種現(xiàn)象我們稱為緩存擊穿荚板。
3.2 會帶來什么問題
會造成某一時刻數(shù)據(jù)庫請求量過大,壓力劇增吩屹。
3.3 如何解決
上面的現(xiàn)象是多個線程同時去查詢數(shù)據(jù)庫的這條數(shù)據(jù)跪另,那么我們可以在第一個查詢數(shù)據(jù)的請求上使用一個 互斥鎖來鎖住它。
其他的線程走到這一步拿不到鎖就等著煤搜,等第一個線程查詢到了數(shù)據(jù)免绿,然后做緩存。后面的線程進(jìn)來發(fā)現(xiàn)已經(jīng)有緩存了擦盾,就直接走緩存嘲驾。
4 緩存雪崩
4.1 什么是緩存雪崩
緩存雪崩的情況是說,當(dāng)某一時刻發(fā)生大規(guī)模的緩存失效的情況迹卢,比如你的緩存服務(wù)宕機(jī)了辽故,會有大量的請求進(jìn)來直接打到DB上面。結(jié)果就是DB 稱不住腐碱,掛掉誊垢。
4.2 解決辦法
4.2.1 事前:
使用集群緩存,保證緩存服務(wù)的高可用
這種方案就是在發(fā)生雪崩前對緩存集群實(shí)現(xiàn)高可用,如果是使用 Redis喂走,可以使用 主從+哨兵 殃饿,Redis Cluster 來避免 Redis 全盤崩潰的情況。
4.2.2 事中:
ehcache本地緩存 + Hystrix限流&降級,避免MySQL被打死
使用 ehcache 本地緩存的目的也是考慮在 Redis Cluster 完全不可用的時候缴啡,ehcache 本地緩存還能夠支撐一陣壁晒。
使用 Hystrix進(jìn)行限流 & 降級 ,比如一秒來了5000個請求业栅,我們可以設(shè)置假設(shè)只能有一秒 2000個請求能通過這個組件秒咐,那么其他剩余的 3000 請求就會走限流邏輯。
然后去調(diào)用我們自己開發(fā)的降級組件(降級)碘裕,比如設(shè)置的一些默認(rèn)值呀之類的携取。以此來保護(hù)最后的 MySQL 不會被大量的請求給打死。
4.2.3 事后:
-
開啟Redis持久化機(jī)制帮孔,盡快恢復(fù)緩存集群
一旦重啟雷滋,就能從磁盤上自動加載數(shù)據(jù)恢復(fù)內(nèi)存中的數(shù)據(jù)。
防止雪崩方案如下圖所示:
5 解決熱點(diǎn)數(shù)據(jù)集中失效問題
我們在設(shè)置緩存的時候文兢,一般會給緩存設(shè)置一個失效時間晤斩,過了這個時間,緩存就失效了姆坚。
對于一些熱點(diǎn)的數(shù)據(jù)來說澳泵,當(dāng)緩存失效以后會存在大量的請求過來,然后打到數(shù)據(jù)庫去兼呵,從而可能導(dǎo)致數(shù)據(jù)庫崩潰的情況兔辅。
5.1 解決辦法
5.1.1 設(shè)置不同的失效時間
為了避免這些熱點(diǎn)的數(shù)據(jù)集中失效,那么我們在設(shè)置緩存過期時間的時候击喂,我們讓他們失效的時間錯開维苔。
比如在一個基礎(chǔ)的時間上加上或者減去一個范圍內(nèi)的隨機(jī)值。
5.1.2 互斥鎖
結(jié)合上面的擊穿的情況懂昂,在第一個請求去查詢數(shù)據(jù)庫的時候?qū)λ右粋€互斥鎖介时,其余的查詢請求都會被阻塞住,直到鎖被釋放凌彬,從而保護(hù)數(shù)據(jù)庫潮尝。
但是也是由于它會阻塞其他的線程,此時系統(tǒng)吞吐量會下降饿序。需要結(jié)合實(shí)際的業(yè)務(wù)去考慮是否要這么做。