系统设计基础2:负载均衡与一致性哈希

前一篇文章介绍了系统的两种扩展模式,垂直扩展和水平扩展。本节将介绍采用水平扩展方式的负载均衡和一致性哈希的概念。

初步设计

负载均衡的含义为将客户端的请求平均分散到每个服务器上。假设系统接收到的请求数为M,初始的服务器数量为N,那么我们可以很直接的想到以下的负载均衡方法:将每个请求的ID进行Hash,然后对N取模,得到的结果即为该请求应该发送的服务器ID。

S_i= H(R_i) \% N

假如服务器的数量N=4,那么负载均衡的示意图如下:

负载均衡的初步实现

节点数量变化

上述的方法在服务器的数量不变时,可以实现负载均衡的功能。但当节点变化时,例如服务器的数量从4增加到5,如果采用上述的Hash算法的话,从饼图可以看出,原本服务器0上的5%的请求,会发送到服务器1上;服务器1的10%的请求,会发送到服务器2上;服务器2的15%的请求,会发送到服务器3上;服务器3的20%的请求,会发送到新添加的服务器4上。

采用常规哈希算法,增加一台服务器

由于新增加了一个服务器,使得请求最终发送到的服务器发生了巨大的变化,有50%的请求都发送到了其他服务器上。如果我们的系统并不关心是由哪台服务器处理这个请求,那是没有问题的。

但在通常情况下,我们可能会在系统中针对某个请求进行缓存,比如这是一个用户鉴权的服务,我们会把鉴权的相关信息存储在服务器的内存中,以提高性能。如果发生了服务器的变化,不仅需要重新获取用户的权限信息,之前保留的缓存也会有部分失效。因此采用这种负载均衡的方式,在节点数量变化时,对系统的运行产生了较大的影响。

改进设计

既然增加了一个服务器,就一定会有一些原本发送的已有服务器的请求,发送到新的服务器上,这是不可避免的。我们思考的是如何才能将这些请求的比例控制在最低。从下面的饼图看出,将发送到原服务器的请求,每个拿出5%发送到新服务器上,这样总共只有20%的请求改变了最终发送的服务器,如果采用这种方式处理服务器数量的变化,是最优的负载均衡方式。

采用一致性哈希算法,增加一台服务器

改进设计的实现

为了实现上述的设计,我们采用的方法称为一致性哈希。通过将服务器ID进行哈希,然后对M取模,得到一个哈希值,该值为下图中圆环中的一点,用黑线表示。对所有服务器做同样的处理,得到每个服务器在圆环上对应的点。此时,在接收到一个请求后,根据请求ID计算哈希值,在圆环上用红线表示,再按顺时针方向寻找临近的服务器,作为该请求发送的目标服务器。

point in ring = H(S_i) \% M

请求选择目标服务器的示意图

如果新增一个服务器s4,采用同样的方法将s4的哈希值标记为圆环的一点。如上图所示,原本发送到s0的请求,便有一部分发送到s4上,而发送到其他三个服务器的请求将不受影响。

上图存在的一个问题是,虽然说理论上N个服务器,可以将每个服务器的负载降低到原来的1/N,但是无论采用什么哈希算法,计算出的每个服务器的哈希值间距都是不相等的,在圆环上的分布是不均匀的,导致各个服务器的负载并不均衡。

那将如何解决这个问题呢:采用多种哈希算法。

假设我们使用两种哈希算法h1和h2,每个服务器对应在圆环上的两个点。将请求ID进行哈希后,同样顺时针查找最近的服务器,由于此时服务器的哈希值增多了一倍,在圆环上的分布比之前要更加均匀,负载不均衡的现象将得到改善。如果哈希算法的数量足够多,这里一般取K = log(N),那就会得到类似于第三张图的效果,每个原服务器的相同比例的请求,发送到新服务器上。

同样,如果减少服务器的数量,和增加服务器数量是同理的。

小结

以上便是关于分布式系统中良好的负载均衡的实现,采用的方法称为一致性哈希算法,通过将服务器ID和请求ID同时进行哈希计算,寻找同一方向最临近值的方法,最大程度上避免了在服务器数量变化时,请求发送的目标服务器出现大规模变化。

欢迎大家订阅专题,其中包含了系统设计基础系列的全部文章:System Design

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,053评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,527评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,779评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,685评论 1 276
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,699评论 5 366
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,609评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,989评论 3 396
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,654评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,890评论 1 298
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,634评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,716评论 1 330
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,394评论 4 319
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,976评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,950评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,191评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 44,849评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,458评论 2 342