[譯]LinkedIn數(shù)據(jù)中心的100G技術改革

原文:The LinkedIn Data Center 100G Transformation

譯者:杰微刊兼職翻譯繆晨

LinkedIn的持續(xù)發(fā)展使得我們必須在未來的3-5年間將我們的數(shù)據(jù)中心發(fā)展到一個宏大的規(guī)模黔姜。Altair項目是我們創(chuàng)建大規(guī)乃嵋郏可擴容數(shù)據(jù)中心的途徑薪伏。新的LinkedIn數(shù)據(jù)中心正在Oregon建設中,內部稱作LOR1寺酪,這將是我們構建的第一個大容量數(shù)據(jù)中心架構,這將引領我們將服務器的級別從萬級走向十萬級缓呛。這個數(shù)據(jù)中心的新型網(wǎng)絡架構可以支持根據(jù)需要擴充服務器數(shù)量艺栈,而且利用10/25/50/100的技術階梯來支持使用不同網(wǎng)絡連接的混合多層的服務。

在這篇博客中放妈,我們將闡述我們是如何利用100G技術構建高度可擴容且成本高效軟件的北救,這將引領我們的系統(tǒng)進入下一代的數(shù)據(jù)中心荐操。

LOR1網(wǎng)絡架構

LOR1數(shù)據(jù)中心的網(wǎng)絡網(wǎng)絡是基于一個4面5階段的Clos網(wǎng)絡構建,我們決定只使用1RU 的機柜構建整個數(shù)據(jù)中心的網(wǎng)路珍策,以支持6位數(shù)起的服務器托启。

LinkedIn的四個數(shù)據(jù)中心都是基于pod配置構建的,一共64個pod攘宙,每個pod有數(shù)千臺服務器屯耸,由于pod之間獨立構建并且可以優(yōu)化本地流量,為擴容及過渡到大型數(shù)據(jù)中心環(huán)境需要模聋,我們創(chuàng)建了一個扁平網(wǎng)絡使用固定的端對端延時和過載率肩民。我們網(wǎng)絡的一些特色如下:

1. 骨干網(wǎng)絡無過載 (1:1)

2. 端對端過載超過6:1

3. 解決端到端延遲 – 所有的交換機都是單芯單跳的

4. 只使用1RU的交換機柜

5. 整個數(shù)據(jù)中心使用同樣的交換 (32x100G)

6. 基于上述過載的六位數(shù)服務器容量

7. 網(wǎng)絡容量與服務數(shù)實現(xiàn)三級上載

8. 易于管理,易于擴容

9. 簡單!

下圖從多個層面展示了LOR1的分片架構


注意: 上圖反映了大概LOR1架構中大約10萬服務器的實現(xiàn)链方,并不實際反映出LOR1中服務器的數(shù)量。

以100G為基準技術

為了適配100G技術灶搜,我們發(fā)現(xiàn)自己處于一種困境當中祟蚀。一方面,在一線使用的時候有很多好處割卖,比如容量前酿、特征、規(guī)模等鹏溯;另一方面罢维,費用是一個問題。在LinkIn我們成功打破了這個矛盾丙挽。我們利用 PSM4技術解決了這個問題肺孵。我們使用100GPSM技術并按50G劃分配置。這使我們可以從最新的交換技術中獲利颜阐,光連接的價格是使用40G光纖互聯(lián)的一半平窘。

關注單端口的成本,40G光模塊(單點模式)如LR4-Light與PSM4模塊成本相當凳怨。但是每個PSM4模塊卻可以傳輸兩個節(jié)點而且還比LR4-Light多25%的帶寬瑰艘。

從大的角度上講數(shù)據(jù)中心(即使一個較小的尺度),對于投資者的資本支出可以節(jié)省數(shù)百萬美元肤舞,而且更快更好紫新。出于保密原因,我們不能分享具體的支出數(shù)據(jù)李剖,但是我希望大家都根據(jù)自己的環(huán)境計算下到底能省多少錢芒率。

這個解決方案的唯一挑戰(zhàn)是在一個物理端口上分享兩個邏輯端口,稱作四通道SFP (QSFP)接口杖爽。以工業(yè)上大容量交換機的觀點來看敲董,我們有足夠的端口來處理這個問題紫皇,但是我們需要光模塊供應商給我們提供50G的模塊,PSM2或者CWDM2腋寨。這將是任何數(shù)據(jù)中心從10/40G網(wǎng)絡遷移到10/25/50/100G網(wǎng)絡的理想方式聪铺,并且將帶領整個產(chǎn)業(yè)進入下一個層次。我想號召一下萄窜,如果你有志于50G技術的開發(fā)铃剔,讓我們一起把它變?yōu)楝F(xiàn)實吧。

將來的開發(fā)計劃

在LinkedIn查刻,我們計劃繼續(xù)驅動光網(wǎng)絡技術在一線的應用键兜,以及未來數(shù)據(jù)中心的連接技術。我們期待200G技術和一個8通道版的QSFP穗泵,這樣就能解決QSFP的缺點普气,也能突破200G/400G成本高效網(wǎng)絡技術。我們也將繼續(xù)支持和激活數(shù)據(jù)中心各個維度的創(chuàng)新佃延,從網(wǎng)絡和連接到服務和存儲现诀。

綜述

我們構建了一個以100G為基線技術的高可擴展且成本高效的數(shù)據(jù)中心技術,主要利用將100G分為兩個50G的思路履肃。我們將繼續(xù)努力建設最好的數(shù)據(jù)中心仔沿,來保證LinkedIn未來數(shù)年的應用和服務創(chuàng)新。

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
  • 序言:七十年代末尺棋,一起剝皮案震驚了整個濱河市封锉,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌膘螟,老刑警劉巖成福,帶你破解...
    沈念sama閱讀 221,548評論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異萍鲸,居然都是意外死亡闷叉,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,497評論 3 399
  • 文/潘曉璐 我一進店門脊阴,熙熙樓的掌柜王于貴愁眉苦臉地迎上來握侧,“玉大人,你說我怎么就攤上這事嘿期∑非妫” “怎么了?”我有些...
    開封第一講書人閱讀 167,990評論 0 360
  • 文/不壞的土叔 我叫張陵备徐,是天一觀的道長萄传。 經(jīng)常有香客問我,道長,這世上最難降的妖魔是什么秀菱? 我笑而不...
    開封第一講書人閱讀 59,618評論 1 296
  • 正文 為了忘掉前任振诬,我火速辦了婚禮,結果婚禮上衍菱,老公的妹妹穿的比我還像新娘赶么。我一直安慰自己,他們只是感情好脊串,可當我...
    茶點故事閱讀 68,618評論 6 397
  • 文/花漫 我一把揭開白布辫呻。 她就那樣靜靜地躺著,像睡著了一般琼锋。 火紅的嫁衣襯著肌膚如雪放闺。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 52,246評論 1 308
  • 那天缕坎,我揣著相機與錄音怖侦,去河邊找鬼。 笑死念赶,一個胖子當著我的面吹牛础钠,可吹牛的內容都是我干的。 我是一名探鬼主播叉谜,決...
    沈念sama閱讀 40,819評論 3 421
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼踩萎!你這毒婦竟也來了停局?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 39,725評論 0 276
  • 序言:老撾萬榮一對情侶失蹤香府,失蹤者是張志新(化名)和其女友劉穎董栽,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體企孩,經(jīng)...
    沈念sama閱讀 46,268評論 1 320
  • 正文 獨居荒郊野嶺守林人離奇死亡锭碳,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 38,356評論 3 340
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了勿璃。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片擒抛。...
    茶點故事閱讀 40,488評論 1 352
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖补疑,靈堂內的尸體忽然破棺而出歧沪,到底是詐尸還是另有隱情,我是刑警寧澤莲组,帶...
    沈念sama閱讀 36,181評論 5 350
  • 正文 年R本政府宣布诊胞,位于F島的核電站,受9級特大地震影響锹杈,放射性物質發(fā)生泄漏撵孤。R本人自食惡果不足惜迈着,卻給世界環(huán)境...
    茶點故事閱讀 41,862評論 3 333
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望邪码。 院中可真熱鬧裕菠,春花似錦、人聲如沸霞扬。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,331評論 0 24
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽喻圃。三九已至萤彩,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間斧拍,已是汗流浹背雀扶。 一陣腳步聲響...
    開封第一講書人閱讀 33,445評論 1 272
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留肆汹,地道東北人愚墓。 一個月前我還...
    沈念sama閱讀 48,897評論 3 376
  • 正文 我出身青樓,卻偏偏與公主長得像昂勉,于是被迫代替她去往敵國和親浪册。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 45,500評論 2 359

推薦閱讀更多精彩內容