百萬級QPS的公共配置中心設計方案

1、場景

常見的開關信息、訪問地址信息示血,一般的分布式配置中心(比如disconf)就可以搞定,但是如果是一些value非常大的配置信息救拉,比如value超過1M的活動文案信息难审,或者一些臨時活動的配置信息,只在特定節(jié)假日使用一次亿絮,用完就可以刪除告喊,如果把這些信息都放在disconf上,那么disconf文件會越來越大壹无,不但維護越來越困難葱绒,而且每次有變更,拉取這么大文件也費時間斗锭,所以我們需要開發(fā)適合自己項目的配置中心地淀。

2、設計公共配置服務注意點

  1. 低成本:公共配置中心作為基礎服務岖是,假設單個節(jié)點支持30000PS帮毁,支持百萬,需要300個節(jié)點才能支撐豺撑,成本能否hold住?

    業(yè)務模塊緩存公共配置烈疚,獲取不到值才調用公共配置中心

  2. 高性能:業(yè)務模塊通過http或rpc調用基礎服務,如果網(wǎng)絡抖動聪轿,高并發(fā)下很容易服務超時爷肝,影響業(yè)務?

    同步調用弊端,同步換成異步陆错,定時拉取

  3. 實時性:獲取配置信息的實時性如何保障?

    通過發(fā)布訂閱通知變更

  4. 高可用:公共配置不能丟失灯抛,必須高可用,業(yè)務模塊是否要緩存公共配置?

    業(yè)務本地緩存公共配置

  5. 高并發(fā):高并發(fā)下音瓷,基礎服務不能掛?

    限流对嚼,redis緩存,本地緩存

3绳慎、架構設計

3.1 方案設計:

業(yè)務模塊集成sdk-->sdk定時拉取配置到本地緩存--->http請求遠程的配置服務

3.2 公共配置服務架構圖

image.png

3.3 SDK設計

  • 1纵竖、定時拉取公共配置數(shù)據(jù)到本地緩存漠烧,業(yè)務需要獲取配置,從本地緩存中讀取
  • 2靡砌、業(yè)務模塊啟動拉取遠程數(shù)據(jù)已脓,更新本地緩存
  • 3、提供公共配置相關API(獲取string通殃、bean摆舟、List)

3.4 公共配置服務設計

  • 1、通過多級緩存前置查詢提升接口的OPS(緩存數(shù)據(jù)新增或修改邓了、查詢)
  • 2、本地緩存媳瞪、redis緩存骗炉、db一致性保障
  • 3、限流保障接口可用
最后編輯于
?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
  • 序言:七十年代末蛇受,一起剝皮案震驚了整個濱河市句葵,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌兢仰,老刑警劉巖乍丈,帶你破解...
    沈念sama閱讀 216,324評論 6 498
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異把将,居然都是意外死亡轻专,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,356評論 3 392
  • 文/潘曉璐 我一進店門察蹲,熙熙樓的掌柜王于貴愁眉苦臉地迎上來请垛,“玉大人,你說我怎么就攤上這事洽议∽谑眨” “怎么了?”我有些...
    開封第一講書人閱讀 162,328評論 0 353
  • 文/不壞的土叔 我叫張陵亚兄,是天一觀的道長混稽。 經常有香客問我,道長审胚,這世上最難降的妖魔是什么匈勋? 我笑而不...
    開封第一講書人閱讀 58,147評論 1 292
  • 正文 為了忘掉前任,我火速辦了婚禮菲盾,結果婚禮上颓影,老公的妹妹穿的比我還像新娘。我一直安慰自己懒鉴,他們只是感情好诡挂,可當我...
    茶點故事閱讀 67,160評論 6 388
  • 文/花漫 我一把揭開白布碎浇。 她就那樣靜靜地躺著,像睡著了一般璃俗。 火紅的嫁衣襯著肌膚如雪奴璃。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,115評論 1 296
  • 那天城豁,我揣著相機與錄音苟穆,去河邊找鬼。 笑死唱星,一個胖子當著我的面吹牛雳旅,可吹牛的內容都是我干的。 我是一名探鬼主播间聊,決...
    沈念sama閱讀 40,025評論 3 417
  • 文/蒼蘭香墨 我猛地睜開眼攒盈,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了哎榴?” 一聲冷哼從身側響起型豁,我...
    開封第一講書人閱讀 38,867評論 0 274
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎尚蝌,沒想到半個月后迎变,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經...
    沈念sama閱讀 45,307評論 1 310
  • 正文 獨居荒郊野嶺守林人離奇死亡飘言,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 37,528評論 2 332
  • 正文 我和宋清朗相戀三年衣形,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片姿鸿。...
    茶點故事閱讀 39,688評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡泵喘,死狀恐怖,靈堂內的尸體忽然破棺而出般妙,到底是詐尸還是另有隱情纪铺,我是刑警寧澤,帶...
    沈念sama閱讀 35,409評論 5 343
  • 正文 年R本政府宣布碟渺,位于F島的核電站鲜锚,受9級特大地震影響,放射性物質發(fā)生泄漏苫拍。R本人自食惡果不足惜芜繁,卻給世界環(huán)境...
    茶點故事閱讀 41,001評論 3 325
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望绒极。 院中可真熱鬧骏令,春花似錦、人聲如沸垄提。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,657評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至凰兑,卻和暖如春妥粟,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背吏够。 一陣腳步聲響...
    開封第一講書人閱讀 32,811評論 1 268
  • 我被黑心中介騙來泰國打工勾给, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人锅知。 一個月前我還...
    沈念sama閱讀 47,685評論 2 368
  • 正文 我出身青樓播急,卻偏偏與公主長得像,于是被迫代替她去往敵國和親售睹。 傳聞我的和親對象是個殘疾皇子旅择,可洞房花燭夜當晚...
    茶點故事閱讀 44,573評論 2 353