原文:The LinkedIn Data Center 100G Transformation
譯者:杰微刊兼職翻譯繆晨
LinkedIn的持續(xù)發(fā)展使得我們必須在未來的3-5年間將我們的數(shù)據(jù)中心發(fā)展到一個宏大的規(guī)模黔姜。Altair項目是我們創(chuàng)建大規(guī)乃嵋郏可擴容數(shù)據(jù)中心的途徑薪伏。新的LinkedIn數(shù)據(jù)中心正在Oregon建設中,內部稱作LOR1寺酪,這將是我們構建的第一個大容量數(shù)據(jù)中心架構,這將引領我們將服務器的級別從萬級走向十萬級缓呛。這個數(shù)據(jù)中心的新型網(wǎng)絡架構可以支持根據(jù)需要擴充服務器數(shù)量艺栈,而且利用10/25/50/100的技術階梯來支持使用不同網(wǎng)絡連接的混合多層的服務。
在這篇博客中放妈,我們將闡述我們是如何利用100G技術構建高度可擴容且成本高效軟件的北救,這將引領我們的系統(tǒng)進入下一代的數(shù)據(jù)中心荐操。
LOR1網(wǎng)絡架構
LOR1數(shù)據(jù)中心的網(wǎng)絡網(wǎng)絡是基于一個4面5階段的Clos網(wǎng)絡構建,我們決定只使用1RU 的機柜構建整個數(shù)據(jù)中心的網(wǎng)路珍策,以支持6位數(shù)起的服務器托启。
LinkedIn的四個數(shù)據(jù)中心都是基于pod配置構建的,一共64個pod攘宙,每個pod有數(shù)千臺服務器屯耸,由于pod之間獨立構建并且可以優(yōu)化本地流量,為擴容及過渡到大型數(shù)據(jù)中心環(huán)境需要模聋,我們創(chuàng)建了一個扁平網(wǎng)絡使用固定的端對端延時和過載率肩民。我們網(wǎng)絡的一些特色如下:
1. 骨干網(wǎng)絡無過載 (1:1)
2. 端對端過載超過6:1
3. 解決端到端延遲 – 所有的交換機都是單芯單跳的
4. 只使用1RU的交換機柜
5. 整個數(shù)據(jù)中心使用同樣的交換 (32x100G)
6. 基于上述過載的六位數(shù)服務器容量
7. 網(wǎng)絡容量與服務數(shù)實現(xiàn)三級上載
8. 易于管理,易于擴容
9. 簡單!
下圖從多個層面展示了LOR1的分片架構
注意: 上圖反映了大概LOR1架構中大約10萬服務器的實現(xiàn)链方,并不實際反映出LOR1中服務器的數(shù)量。
以100G為基準技術
為了適配100G技術灶搜,我們發(fā)現(xiàn)自己處于一種困境當中祟蚀。一方面,在一線使用的時候有很多好處割卖,比如容量前酿、特征、規(guī)模等鹏溯;另一方面罢维,費用是一個問題。在LinkIn我們成功打破了這個矛盾丙挽。我們利用 PSM4技術解決了這個問題肺孵。我們使用100GPSM技術并按50G劃分配置。這使我們可以從最新的交換技術中獲利颜阐,光連接的價格是使用40G光纖互聯(lián)的一半平窘。
關注單端口的成本,40G光模塊(單點模式)如LR4-Light與PSM4模塊成本相當凳怨。但是每個PSM4模塊卻可以傳輸兩個節(jié)點而且還比LR4-Light多25%的帶寬瑰艘。
從大的角度上講數(shù)據(jù)中心(即使一個較小的尺度),對于投資者的資本支出可以節(jié)省數(shù)百萬美元肤舞,而且更快更好紫新。出于保密原因,我們不能分享具體的支出數(shù)據(jù)李剖,但是我希望大家都根據(jù)自己的環(huán)境計算下到底能省多少錢芒率。
這個解決方案的唯一挑戰(zhàn)是在一個物理端口上分享兩個邏輯端口,稱作四通道SFP (QSFP)接口杖爽。以工業(yè)上大容量交換機的觀點來看敲董,我們有足夠的端口來處理這個問題紫皇,但是我們需要光模塊供應商給我們提供50G的模塊,PSM2或者CWDM2腋寨。這將是任何數(shù)據(jù)中心從10/40G網(wǎng)絡遷移到10/25/50/100G網(wǎng)絡的理想方式聪铺,并且將帶領整個產(chǎn)業(yè)進入下一個層次。我想號召一下萄窜,如果你有志于50G技術的開發(fā)铃剔,讓我們一起把它變?yōu)楝F(xiàn)實吧。
將來的開發(fā)計劃
在LinkedIn查刻,我們計劃繼續(xù)驅動光網(wǎng)絡技術在一線的應用键兜,以及未來數(shù)據(jù)中心的連接技術。我們期待200G技術和一個8通道版的QSFP穗泵,這樣就能解決QSFP的缺點普气,也能突破200G/400G成本高效網(wǎng)絡技術。我們也將繼續(xù)支持和激活數(shù)據(jù)中心各個維度的創(chuàng)新佃延,從網(wǎng)絡和連接到服務和存儲现诀。
綜述
我們構建了一個以100G為基線技術的高可擴展且成本高效的數(shù)據(jù)中心技術,主要利用將100G分為兩個50G的思路履肃。我們將繼續(xù)努力建設最好的數(shù)據(jù)中心仔沿,來保證LinkedIn未來數(shù)年的應用和服務創(chuàng)新。