網(wǎng)易視頻云:專注于技術(shù)服務(wù)——異步通知系統(tǒng)

隨著互聯(lián)網(wǎng)技術(shù)的發(fā)展查描,云計算在資源層面競爭已經(jīng)進(jìn)入白熱化的階段,網(wǎng)易視頻云定位于PAAS層面组力,從各個技術(shù)領(lǐng)域進(jìn)行技術(shù)鉆研以提供給用戶更高效省容、更穩(wěn)定、更便捷的視頻直播技術(shù)服務(wù)燎字;notify系統(tǒng)作為網(wǎng)易視頻云對外技術(shù)服務(wù)的一員腥椒,提供面向海量用戶的高可用異步回調(diào)服務(wù)。

目前直播平臺大多采用以下架構(gòu)(圖一):客戶通過推拉流SDK或軟件直接與直播/點播平臺進(jìn)行推拉流/轉(zhuǎn)碼交互候衍,這樣的架構(gòu)下客戶企業(yè)應(yīng)用中對直播/點播狀態(tài)及數(shù)據(jù)的管理增加了更多條件限制笼蛛,客戶企業(yè)應(yīng)用服務(wù)器在維護(hù)直播/點播數(shù)據(jù)信息需要考慮各種復(fù)雜場景因素:一、推流端非正常退出時客戶企業(yè)應(yīng)用服務(wù)器無法感知用戶真實的流狀態(tài)蛉鹿;二滨砍、客戶企業(yè)應(yīng)用無法感知推流用戶使用第三方技術(shù)進(jìn)行推拉流等。


因此為了讓客戶能更準(zhǔn)確高效的獲取實時直播數(shù)據(jù)妖异,網(wǎng)易視頻云提供了一套高效穩(wěn)定的異步回調(diào)服務(wù)機制(圖二)惋戏,給用戶提供實時高效的數(shù)據(jù)服務(wù)。


與內(nèi)部服務(wù)系統(tǒng)相比他膳,外部異步通知不僅需要考慮海量數(shù)據(jù)處理的性能同時還需要考慮不同接收方網(wǎng)絡(luò)環(huán)境响逢、數(shù)據(jù)處理耗時差異的影響。因此如何在負(fù)責(zé)環(huán)境下棕孙,給用戶提供可靠通知服務(wù)是首要解決問題舔亭。

系統(tǒng)設(shè)計


通知系統(tǒng)作為網(wǎng)易視頻云通用化海量通知發(fā)送平臺為設(shè)計目標(biāo)并不關(guān)心具體業(yè)務(wù)場景(圖三),接入方只需要根據(jù)自己的業(yè)務(wù)狀態(tài)將發(fā)送目標(biāo)地址散罕、發(fā)送內(nèi)容進(jìn)行通知注冊分歇,通知系統(tǒng)即可根據(jù)相關(guān)用戶配置信息進(jìn)行高容錯發(fā)送傀蓉,在流程上盡可能提高發(fā)送方的業(yè)務(wù)處理效率欧漱;為更好支持業(yè)務(wù)通知系統(tǒng)還提供了提交、回滾可選項二階段注冊方式葬燎。

通知客戶端/api:提供給業(yè)務(wù)接入方進(jìn)行通知注冊误甚、查詢、提交谱净、回滾功能的高可用RPC接口窑邦。

通知恢復(fù)處理器:用于觸發(fā)指定時間點的通知進(jìn)行重發(fā)處理,對重發(fā)任務(wù)進(jìn)行恢復(fù)調(diào)度壕探。

消息通道:可根據(jù)不同業(yè)務(wù)或用戶配置不同的消息通道(圖四)冈钦,一個通道被堵不會影響其他通道,一部分用戶處理緩慢不會影響全部客戶李请,從而起到故障隔離的目的瞧筛。


通知協(xié)議處理器:真正執(zhí)行通知發(fā)送的組件厉熟,不同的接收方往往基于自己的技術(shù)使用不同的協(xié)議,如:http较幌、https或其他協(xié)議揍瑟,協(xié)議處理器按用戶配置選擇指定的協(xié)議進(jìn)行通知處理,插拔式功能模塊更方便支持業(yè)務(wù)拓展乍炉。

決策器:決策處理器根據(jù)協(xié)議處理器處理結(jié)果和用戶的通知發(fā)送配置信息進(jìn)行重試調(diào)度绢片、消息降級、丟棄岛琼、歸檔處理底循;第一次通知發(fā)送往往是業(yè)務(wù)最關(guān)心的即時信息,因此具有通道中最高優(yōu)先調(diào)度權(quán)槐瑞,正常情況下第一次發(fā)送失敗后則會立即進(jìn)行重發(fā)嘗試此叠,否則根據(jù)策略進(jìn)行消息降級處理,對于發(fā)送失敗越高的通知調(diào)度的優(yōu)先級越低随珠。

monitor:監(jiān)控實時系統(tǒng)狀態(tài)灭袁,監(jiān)控通知積壓情況。

通知系統(tǒng)內(nèi)部采用注冊和發(fā)送分離的方案窗看,面向接入業(yè)務(wù)提供高tps數(shù)據(jù)寫入茸歧,讓業(yè)務(wù)處理更純粹,更效率显沈;通知內(nèi)部基于通道软瞎、協(xié)議及決策器協(xié)同處理設(shè)計方案從細(xì)節(jié)上提高海量數(shù)據(jù)處理能力,使通知系統(tǒng)具備資源合理分配拉讯、故障隔離涤浇、優(yōu)先調(diào)度調(diào)控的能力,為通知發(fā)送發(fā)和接收方提供更高的質(zhì)量保障魔慷;同時通知集群采用高可用分布式服務(wù)框架只锭,通知業(yè)務(wù)接入方和通知服務(wù)端采用點對點的調(diào)用方式,支持對業(yè)務(wù)透明的動態(tài)擴(kuò)容方案院尔。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末蜻展,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子邀摆,更是在濱河造成了極大的恐慌纵顾,老刑警劉巖,帶你破解...
    沈念sama閱讀 216,402評論 6 499
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件栋盹,死亡現(xiàn)場離奇詭異施逾,居然都是意外死亡,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,377評論 3 392
  • 文/潘曉璐 我一進(jìn)店門汉额,熙熙樓的掌柜王于貴愁眉苦臉地迎上來沪饺,“玉大人,你說我怎么就攤上這事闷愤≌希” “怎么了?”我有些...
    開封第一講書人閱讀 162,483評論 0 353
  • 文/不壞的土叔 我叫張陵讥脐,是天一觀的道長遭居。 經(jīng)常有香客問我,道長旬渠,這世上最難降的妖魔是什么俱萍? 我笑而不...
    開封第一講書人閱讀 58,165評論 1 292
  • 正文 為了忘掉前任,我火速辦了婚禮告丢,結(jié)果婚禮上枪蘑,老公的妹妹穿的比我還像新娘。我一直安慰自己岖免,他們只是感情好岳颇,可當(dāng)我...
    茶點故事閱讀 67,176評論 6 388
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著颅湘,像睡著了一般话侧。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上闯参,一...
    開封第一講書人閱讀 51,146評論 1 297
  • 那天瞻鹏,我揣著相機與錄音,去河邊找鬼鹿寨。 笑死新博,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的脚草。 我是一名探鬼主播赫悄,決...
    沈念sama閱讀 40,032評論 3 417
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼玩讳!你這毒婦竟也來了涩蜘?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 38,896評論 0 274
  • 序言:老撾萬榮一對情侶失蹤熏纯,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后粤策,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體樟澜,經(jīng)...
    沈念sama閱讀 45,311評論 1 310
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,536評論 2 332
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了秩贰。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片霹俺。...
    茶點故事閱讀 39,696評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖毒费,靈堂內(nèi)的尸體忽然破棺而出丙唧,到底是詐尸還是另有隱情,我是刑警寧澤觅玻,帶...
    沈念sama閱讀 35,413評論 5 343
  • 正文 年R本政府宣布想际,位于F島的核電站,受9級特大地震影響溪厘,放射性物質(zhì)發(fā)生泄漏胡本。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 41,008評論 3 325
  • 文/蒙蒙 一畸悬、第九天 我趴在偏房一處隱蔽的房頂上張望侧甫。 院中可真熱鬧,春花似錦蹋宦、人聲如沸披粟。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,659評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽僻爽。三九已至,卻和暖如春贾惦,著一層夾襖步出監(jiān)牢的瞬間胸梆,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 32,815評論 1 269
  • 我被黑心中介騙來泰國打工须板, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留碰镜,地道東北人。 一個月前我還...
    沈念sama閱讀 47,698評論 2 368
  • 正文 我出身青樓习瑰,卻偏偏與公主長得像绪颖,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子甜奄,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,592評論 2 353

推薦閱讀更多精彩內(nèi)容

  • 隨著互聯(lián)網(wǎng)技術(shù)的發(fā)展柠横,云計算在資源層面競爭已經(jīng)進(jìn)入白熱化的階段,網(wǎng)易視頻云定位于PAAS層面课兄,從各個技術(shù)領(lǐng)域進(jìn)行技...
    碎心石7閱讀 206評論 0 0
  • Spring Cloud為開發(fā)人員提供了快速構(gòu)建分布式系統(tǒng)中一些常見模式的工具(例如配置管理牍氛,服務(wù)發(fā)現(xiàn),斷路器烟阐,智...
    卡卡羅2017閱讀 134,651評論 18 139
  • 點擊查看原文 Web SDK 開發(fā)手冊 SDK 概述 網(wǎng)易云信 SDK 為 Web 應(yīng)用提供一個完善的 IM 系統(tǒng)...
    layjoy閱讀 13,758評論 0 15
  • 潘雨馨閱讀 74評論 1 1
  • 01 “嘩嘩嘩……”大門推開搬俊,蘇果和林小然帶著滿身的水珠躲了進(jìn)來坝橡,趕緊把門關(guān)上涩拙,雨聲被擋在了外面落剪。 今天的雨真大输玷,...
    十月苗苗閱讀 861評論 0 6