網(wǎng)易視頻云專(zhuān)注于技術(shù)服務(wù)——異步通知系統(tǒng)

隨著互聯(lián)網(wǎng)技術(shù)的發(fā)展城豁,云計(jì)算在資源層面競(jìng)爭(zhēng)已經(jīng)進(jìn)入白熱化的階段赞警,網(wǎng)易視頻云定位于PAAS層面弄跌,從各個(gè)技術(shù)領(lǐng)域進(jìn)行技術(shù)鉆研以提供給用戶(hù)更高效甲喝、更穩(wěn)定、更便捷的視頻直播技術(shù)服務(wù)铛只;notify系統(tǒng)作為網(wǎng)易視頻云對(duì)外技術(shù)服務(wù)的一員埠胖,提供面向海量用戶(hù)的高可用異步回調(diào)服務(wù)糠溜。

目前直播平臺(tái)大多采用以下架構(gòu)(圖一):客戶(hù)通過(guò)推拉流SDK或軟件直接與直播/點(diǎn)播平臺(tái)進(jìn)行推拉流/轉(zhuǎn)碼交互,這樣的架構(gòu)下客戶(hù)企業(yè)應(yīng)用中對(duì)直播/點(diǎn)播狀態(tài)及數(shù)據(jù)的管理增加了更多條件限制直撤,客戶(hù)企業(yè)應(yīng)用服務(wù)器在維護(hù)直播/點(diǎn)播數(shù)據(jù)信息需要考慮各種復(fù)雜場(chǎng)景因素:一非竿、推流端非正常退出時(shí)客戶(hù)企業(yè)應(yīng)用服務(wù)器無(wú)法感知用戶(hù)真實(shí)的流狀態(tài);二谋竖、客戶(hù)企業(yè)應(yīng)用無(wú)法感知推流用戶(hù)使用第三方技術(shù)進(jìn)行推拉流等红柱。

[img]http://ww3.sinaimg.cn/mw690/738da497jw1f8xl5m4fy9j20ou0dewfh.jpg[/img]

因此為了讓客戶(hù)能更準(zhǔn)確高效的獲取實(shí)時(shí)直播數(shù)據(jù),網(wǎng)易視頻云提供了一套高效穩(wěn)定的異步回調(diào)服務(wù)機(jī)制(圖二)圈盔,給用戶(hù)提供實(shí)時(shí)高效的數(shù)據(jù)服務(wù)豹芯。

[img]http://ww1.sinaimg.cn/mw690/738da497jw1f8xl5mjt9oj20h40c974v.jpg[/img]

與內(nèi)部服務(wù)系統(tǒng)相比,外部異步通知不僅需要考慮海量數(shù)據(jù)處理的性能同時(shí)還需要考慮不同接收方網(wǎng)絡(luò)環(huán)境驱敲、數(shù)據(jù)處理耗時(shí)差異的影響铁蹈。因此如何在負(fù)責(zé)環(huán)境下,給用戶(hù)提供可靠通知服務(wù)是首要解決問(wèn)題众眨。

系統(tǒng)設(shè)計(jì)

[img]http://ww1.sinaimg.cn/mw690/738da497jw1f8xl5n2fx7j20ku07fmxo.jpg[/img]

通知系統(tǒng)作為網(wǎng)易視頻云通用化海量通知發(fā)送平臺(tái)為設(shè)計(jì)目標(biāo)并不關(guān)心具體業(yè)務(wù)場(chǎng)景(圖三)握牧,接入方只需要根據(jù)自己的業(yè)務(wù)狀態(tài)將發(fā)送目標(biāo)地址、發(fā)送內(nèi)容進(jìn)行通知注冊(cè)娩梨,通知系統(tǒng)即可根據(jù)相關(guān)用戶(hù)配置信息進(jìn)行高容錯(cuò)發(fā)送沿腰,在流程上盡可能提高發(fā)送方的業(yè)務(wù)處理效率;為更好支持業(yè)務(wù)通知系統(tǒng)還提供了提交狈定、回滾可選項(xiàng)二階段注冊(cè)方式颂龙。

通知客戶(hù)端/api:提供給業(yè)務(wù)接入方進(jìn)行通知注冊(cè)、查詢(xún)纽什、提交措嵌、回滾功能的高可用RPC接口。

通知恢復(fù)處理器:用于觸發(fā)指定時(shí)間點(diǎn)的通知進(jìn)行重發(fā)處理芦缰,對(duì)重發(fā)任務(wù)進(jìn)行恢復(fù)調(diào)度企巢。

消息通道:可根據(jù)不同業(yè)務(wù)或用戶(hù)配置不同的消息通道(圖四),一個(gè)通道被堵不會(huì)影響其他通道让蕾,一部分用戶(hù)處理緩慢不會(huì)影響全部客戶(hù)浪规,從而起到故障隔離的目的。

[img]http://ww3.sinaimg.cn/mw690/738da497jw1f8xl5neaw3j20cw059gls.jpg[/img]

通知協(xié)議處理器:真正執(zhí)行通知發(fā)送的組件探孝,不同的接收方往往基于自己的技術(shù)使用不同的協(xié)議笋婿,如:http、https或其他協(xié)議顿颅,協(xié)議處理器按用戶(hù)配置選擇指定的協(xié)議進(jìn)行通知處理萌抵,插拔式功能模塊更方便支持業(yè)務(wù)拓展。

決策器:決策處理器根據(jù)協(xié)議處理器處理結(jié)果和用戶(hù)的通知發(fā)送配置信息進(jìn)行重試調(diào)度元镀、消息降級(jí)绍填、丟棄、歸檔處理栖疑;第一次通知發(fā)送往往是業(yè)務(wù)最關(guān)心的即時(shí)信息讨永,因此具有通道中最高優(yōu)先調(diào)度權(quán),正常情況下第一次發(fā)送失敗后則會(huì)立即進(jìn)行重發(fā)嘗試遇革,否則根據(jù)策略進(jìn)行消息降級(jí)處理卿闹,對(duì)于發(fā)送失敗越高的通知調(diào)度的優(yōu)先級(jí)越低。

monitor:監(jiān)控實(shí)時(shí)系統(tǒng)狀態(tài)萝快,監(jiān)控通知積壓情況锻霎。

通知系統(tǒng)內(nèi)部采用注冊(cè)和發(fā)送分離的方案,面向接入業(yè)務(wù)提供高tps數(shù)據(jù)寫(xiě)入揪漩,讓業(yè)務(wù)處理更純粹旋恼,更效率;通知內(nèi)部基于通道奄容、協(xié)議及決策器協(xié)同處理設(shè)計(jì)方案從細(xì)節(jié)上提高海量數(shù)據(jù)處理能力冰更,使通知系統(tǒng)具備資源合理分配、故障隔離昂勒、優(yōu)先調(diào)度調(diào)控的能力蜀细,為通知發(fā)送發(fā)和接收方提供更高的質(zhì)量保障;同時(shí)通知集群采用高可用分布式服務(wù)框架戈盈,通知業(yè)務(wù)接入方和通知服務(wù)端采用點(diǎn)對(duì)點(diǎn)的調(diào)用方式奠衔,支持對(duì)業(yè)務(wù)透明的動(dòng)態(tài)擴(kuò)容方案。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末塘娶,一起剝皮案震驚了整個(gè)濱河市归斤,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌血柳,老刑警劉巖官册,帶你破解...
    沈念sama閱讀 221,695評(píng)論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異难捌,居然都是意外死亡膝宁,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,569評(píng)論 3 399
  • 文/潘曉璐 我一進(jìn)店門(mén)根吁,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)员淫,“玉大人,你說(shuō)我怎么就攤上這事击敌〗榉担” “怎么了?”我有些...
    開(kāi)封第一講書(shū)人閱讀 168,130評(píng)論 0 360
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)圣蝎。 經(jīng)常有香客問(wèn)我刃宵,道長(zhǎng),這世上最難降的妖魔是什么徘公? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 59,648評(píng)論 1 297
  • 正文 為了忘掉前任牲证,我火速辦了婚禮,結(jié)果婚禮上关面,老公的妹妹穿的比我還像新娘坦袍。我一直安慰自己,他們只是感情好等太,可當(dāng)我...
    茶點(diǎn)故事閱讀 68,655評(píng)論 6 397
  • 文/花漫 我一把揭開(kāi)白布捂齐。 她就那樣靜靜地躺著,像睡著了一般缩抡。 火紅的嫁衣襯著肌膚如雪奠宜。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書(shū)人閱讀 52,268評(píng)論 1 309
  • 那天缝其,我揣著相機(jī)與錄音挎塌,去河邊找鬼。 笑死内边,一個(gè)胖子當(dāng)著我的面吹牛榴都,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播漠其,決...
    沈念sama閱讀 40,835評(píng)論 3 421
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼嘴高,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了和屎?” 一聲冷哼從身側(cè)響起拴驮,我...
    開(kāi)封第一講書(shū)人閱讀 39,740評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎柴信,沒(méi)想到半個(gè)月后套啤,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 46,286評(píng)論 1 318
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡随常,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,375評(píng)論 3 340
  • 正文 我和宋清朗相戀三年潜沦,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片绪氛。...
    茶點(diǎn)故事閱讀 40,505評(píng)論 1 352
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡唆鸡,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出枣察,到底是詐尸還是另有隱情争占,我是刑警寧澤燃逻,帶...
    沈念sama閱讀 36,185評(píng)論 5 350
  • 正文 年R本政府宣布,位于F島的核電站臂痕,受9級(jí)特大地震影響伯襟,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜刻蟹,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,873評(píng)論 3 333
  • 文/蒙蒙 一逗旁、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧舆瘪,春花似錦、人聲如沸红伦。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 32,357評(píng)論 0 24
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)昙读。三九已至召调,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間蛮浑,已是汗流浹背唠叛。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 33,466評(píng)論 1 272
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留沮稚,地道東北人艺沼。 一個(gè)月前我還...
    沈念sama閱讀 48,921評(píng)論 3 376
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像蕴掏,于是被迫代替她去往敵國(guó)和親障般。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,515評(píng)論 2 359

推薦閱讀更多精彩內(nèi)容