[译]LinkedIn数据中心的100G技术改革

原文:The LinkedIn Data Center 100G Transformation

译者:杰微刊兼职翻译缪晨

LinkedIn的持续发展使得我们必须在未来的3-5年间将我们的数据中心发展到一个宏大的规模。Altair项目是我们创建大规模可扩容数据中心的途径。新的LinkedIn数据中心正在Oregon建设中,内部称作LOR1,这将是我们构建的第一个大容量数据中心架构,这将引领我们将服务器的级别从万级走向十万级。这个数据中心的新型网络架构可以支持根据需要扩充服务器数量,而且利用10/25/50/100的技术阶梯来支持使用不同网络连接的混合多层的服务。

在这篇博客中,我们将阐述我们是如何利用100G技术构建高度可扩容且成本高效软件的,这将引领我们的系统进入下一代的数据中心。

LOR1网络架构

LOR1数据中心的网络网络是基于一个4面5阶段的Clos网络构建,我们决定只使用1RU 的机柜构建整个数据中心的网路,以支持6位数起的服务器。

LinkedIn的四个数据中心都是基于pod配置构建的,一共64个pod,每个pod有数千台服务器,由于pod之间独立构建并且可以优化本地流量,为扩容及过渡到大型数据中心环境需要,我们创建了一个扁平网络使用固定的端对端延时和过载率。我们网络的一些特色如下:

1. 骨干网络无过载 (1:1)

2. 端对端过载超过6:1

3. 解决端到端延迟 – 所有的交换机都是单芯单跳的

4. 只使用1RU的交换机柜

5. 整个数据中心使用同样的交换 (32x100G)

6. 基于上述过载的六位数服务器容量

7. 网络容量与服务数实现三级上载

8. 易于管理,易于扩容

9. 简单!

下图从多个层面展示了LOR1的分片架构


注意: 上图反映了大概LOR1架构中大约10万服务器的实现,并不实际反映出LOR1中服务器的数量。

以100G为基准技术

为了适配100G技术,我们发现自己处于一种困境当中。一方面,在一线使用的时候有很多好处,比如容量、特征、规模等;另一方面,费用是一个问题。在LinkIn我们成功打破了这个矛盾。我们利用 PSM4技术解决了这个问题。我们使用100GPSM技术并按50G划分配置。这使我们可以从最新的交换技术中获利,光连接的价格是使用40G光纤互联的一半。

关注单端口的成本,40G光模块(单点模式)如LR4-Light与PSM4模块成本相当。但是每个PSM4模块却可以传输两个节点而且还比LR4-Light多25%的带宽。

从大的角度上讲数据中心(即使一个较小的尺度),对于投资者的资本支出可以节省数百万美元,而且更快更好。出于保密原因,我们不能分享具体的支出数据,但是我希望大家都根据自己的环境计算下到底能省多少钱。

这个解决方案的唯一挑战是在一个物理端口上分享两个逻辑端口,称作四通道SFP (QSFP)接口。以工业上大容量交换机的观点来看,我们有足够的端口来处理这个问题,但是我们需要光模块供应商给我们提供50G的模块,PSM2或者CWDM2。这将是任何数据中心从10/40G网络迁移到10/25/50/100G网络的理想方式,并且将带领整个产业进入下一个层次。我想号召一下,如果你有志于50G技术的开发,让我们一起把它变为现实吧。

将来的开发计划

在LinkedIn,我们计划继续驱动光网络技术在一线的应用,以及未来数据中心的连接技术。我们期待200G技术和一个8通道版的QSFP,这样就能解决QSFP的缺点,也能突破200G/400G成本高效网络技术。我们也将继续支持和激活数据中心各个维度的创新,从网络和连接到服务和存储。

综述

我们构建了一个以100G为基线技术的高可扩展且成本高效的数据中心技术,主要利用将100G分为两个50G的思路。我们将继续努力建设最好的数据中心,来保证LinkedIn未来数年的应用和服务创新。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 194,670评论 5 460
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 81,928评论 2 371
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 141,926评论 0 320
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,238评论 1 263
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 61,112评论 4 356
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,138评论 1 272
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,545评论 3 381
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,232评论 0 253
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,496评论 1 290
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,596评论 2 310
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,369评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,226评论 3 313
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,600评论 3 299
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 28,906评论 0 17
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,185评论 1 250
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,516评论 2 341
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,721评论 2 335

推荐阅读更多精彩内容