LinkedIn的持續(xù)發(fā)展使得我們必須在未來的3-5年間將我們的數(shù)據(jù)中心發(fā)展到一個宏大的規(guī)模。Altair項目是我們創(chuàng)建大規(guī)模可擴容數(shù)據(jù)中心的途徑。新的LinkedIn數(shù)據(jù)中心正在Oregon建設中，內(nèi)部稱作LOR1，這將是我們構(gòu)建的第一個大容量數(shù)據(jù)中心架構(gòu)，這將引領我們將服務器的級別從萬級走向十萬級。這個數(shù)據(jù)中心的新型網(wǎng)絡架構(gòu)可以支持根據(jù)需要擴充服務器數(shù)量，而且利用10/25/50/100的技術階梯來支持使用不同網(wǎng)絡連接的混合多層的服務。

在這篇博客中，我們將闡述我們是如何利用100G技術構(gòu)建高度可擴容且成本高效軟件的，這將引領我們的系統(tǒng)進入下一代的數(shù)據(jù)中心。

LOR1網(wǎng)絡架構(gòu)

LOR1數(shù)據(jù)中心的網(wǎng)絡網(wǎng)絡是基于一個4面5階段的Clos網(wǎng)絡構(gòu)建，我們決定只使用1RU 的機柜構(gòu)建整個數(shù)據(jù)中心的網(wǎng)路，以支持6位數(shù)起的服務器。

LinkedIn的四個數(shù)據(jù)中心都是基于pod配置構(gòu)建的，一共64個pod，每個pod有數(shù)千臺服務器，由于pod之間獨立構(gòu)建并且可以優(yōu)化本地流量，為擴容及過渡到大型數(shù)據(jù)中心環(huán)境需要，我們創(chuàng)建了一個扁平網(wǎng)絡使用固定的端對端延時和過載率。我們網(wǎng)絡的一些特色如下：

1. 骨干網(wǎng)絡無過載 (1:1)

2. 端對端過載超過6：1

3. 解決端到端延遲 – 所有的交換機都是單芯單跳的

4. 只使用1RU的交換機柜

5. 整個數(shù)據(jù)中心使用同樣的交換 (32x100G)

6. 基于上述過載的六位數(shù)服務器容量

7. 網(wǎng)絡容量與服務數(shù)實現(xiàn)三級上載

8. 易于管理，易于擴容

9. 簡單!

下圖從多個層面展示了LOR1的分片架構(gòu)

注意: 上圖反映了大概LOR1架構(gòu)中大約10萬服務器的實現(xiàn)，并不實際反映出LOR1中服務器的數(shù)量。

以100G為基準技術

為了適配100G技術，我們發(fā)現(xiàn)自己處于一種困境當中。一方面，在一線使用的時候有很多好處，比如容量、特征、規(guī)模等;另一方面，費用是一個問題。在LinkIn我們成功打破了這個矛盾。我們利用 PSM4技術解決了這個問題。我們使用100GPSM技術并按50G劃分配置。這使我們可以從最新的交換技術中獲利，光連接的價格是使用40G光纖互聯(lián)的一半。

關注單端口的成本，40G光模塊(單點模式)如LR4-Light與PSM4模塊成本相當。但是每個PSM4模塊卻可以傳輸兩個節(jié)點而且還比LR4-Light多25%的帶寬。

從大的角度上講數(shù)據(jù)中心(即使一個較小的尺度)，對于投資者的資本支出可以節(jié)省數(shù)百萬美元，而且更快更好。出于保密原因，我們不能分享具體的支出數(shù)據(jù)，但是我希望大家都根據(jù)自己的環(huán)境計算下到底能省多少錢。

這個解決方案的唯一挑戰(zhàn)是在一個物理端口上分享兩個邏輯端口，稱作四通道SFP (QSFP)接口。以工業(yè)上大容量交換機的觀點來看，我們有足夠的端口來處理這個問題，但是我們需要光模塊供應商給我們提供50G的模塊，PSM2或者CWDM2。這將是任何數(shù)據(jù)中心從10/40G網(wǎng)絡遷移到10/25/50/100G網(wǎng)絡的理想方式，并且將帶領整個產(chǎn)業(yè)進入下一個層次。我想號召一下，如果你有志于50G技術的開發(fā)，讓我們一起把它變?yōu)楝F(xiàn)實吧。

將來的開發(fā)計劃

在LinkedIn，我們計劃繼續(xù)驅(qū)動光網(wǎng)絡技術在一線的應用，以及未來數(shù)據(jù)中心的連接技術。我們期待200G技術和一個8通道版的QSFP，這樣就能解決QSFP的缺點，也能突破200G/400G成本高效網(wǎng)絡技術。我們也將繼續(xù)支持和激活數(shù)據(jù)中心各個維度的創(chuàng)新，從網(wǎng)絡和連接到服務和存儲。

綜述

我們構(gòu)建了一個以100G為基線技術的高可擴展且成本高效的數(shù)據(jù)中心技術，主要利用將100G分為兩個50G的思路。我們將繼續(xù)努力建設最好的數(shù)據(jù)中心，來保證LinkedIn未來數(shù)年的應用和服務創(chuàng)新。

文/微笑0619(簡書作者)

原文鏈接：http://www.jianshu.com/p/f75822388f6c