分布式系统-2-RPC

在开篇 分布式系统-0-知识架构 我们介绍了分布式系统的背景和需要解决的问题。其中提到分布式设计主要涉及通讯、容错和性能三个方面,今天我们来聊一聊通讯。

我们先来看看单机的多线程编程,由于在一个进程中大家用的都是同一个代码段,所以只需要在编程语言层面调用某个方法就可以了。但是在多进程编程中我们就得通过操作系统来通讯了,比如信号量,socket 和 pipeline 等,每台机器可以视为一个进程,我们一般基于 TCP 构建远程调用模块。

所谓远程调用,目标是像调用自己的方法一样调用另外一机器的方法,它要处理的问题是路由,参数序列化和反序列化,处理通讯故障。下面主要讨论处理通讯故障的集中思路。

首先我们看看通讯故障是指什么:丢包,网络断线,服务器运行缓慢或者调用宕机的服务器。而且在客户端看来,并不知道是服务器是没有看到自己的请求还是收到了请求但不没有响应,这似乎有点难办。

要保证调用的可用性,可以采取 至少调用一次 模式:第一次调用后,等一会如果没有响应再次发送,重复几次后还是没有响应就给客户端报错。这个模式在远程调用模块部分实现起来比较简单,但是给业务程序增加了复杂度,比如请求 “给账户A充值100元”,由于服务器的响应没有传达到客户端,所以服务器可能会收到多个相同的充值请求,这就需要服务器业务程序保证逻辑的正确性。由此看来这种简单的 “至少调用一次” 模式适合只读和幂等调用。

为了降低业务编程的心智负担,最多调用一次 模式会更好,这就要求远程调用模块识别出相同的请求(用 ID 区分),然后只调用一次函数,用其结果响应这些请求。那么问题来了,如何保证 ID 的唯一性?ClientID+请求序列号是不错方案,但是为了不影响后续的请求,我们需要删掉服务器旧的 ID。下面列了三种可行的删除策略:

  1. 每个客户端维护一个请求序列状态数组,每个请求携带数字N,代表 <= N 的请求都已收到响应,所以服务器上 <= N 的 ID 可以安全清除。是不是类似于 TCP 中的序列号和 ACK ?

  2. 只允许客户端同时处理一个请求,这样服务器接收到新的请求后,旧的请求 ID 就可以删除了。

  3. 每个请求只允许5分钟的重试时间,服务器5分钟后即可清除请求ID。

服务器可能需要持久化正在处理的请求信息,不然服务器重启后可能会将处理过的函数调用再次处理造成业务逻辑问题。

确定执行一次 = 最多调用一次 + 无限重试。

本系列文章还有完善的配套实验,使用简洁好上手的 Go 语言,其中我们会了解 Go 语言标准库 rpc 的设计思路和如何制作兼容 rpc 接口且适用于实验的 labrpc,准备ing,稍后会跟大家分享。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,732评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,496评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,264评论 0 338
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,807评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,806评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,675评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,029评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,683评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 41,704评论 1 299
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,666评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,773评论 1 332
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,413评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,016评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,978评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,204评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,083评论 2 350
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,503评论 2 343

推荐阅读更多精彩内容

  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 134,596评论 18 139
  • 国家电网公司企业标准(Q/GDW)- 面向对象的用电信息数据交换协议 - 报批稿:20170802 前言: 排版 ...
    庭说阅读 10,863评论 6 13
  • 转自:http://blog.csdn.net/kesonyk/article/details/50924489 ...
    晴天哥_王志阅读 24,768评论 2 38
  • 承载量是分布式系统存在的原因 当一个互联网业务获得大众欢迎的时候,最显著碰到的技术问题,就是服务器非常繁忙。当每天...
    XYLY阅读 1,457评论 1 48
  • 他看着幼小灵巧的鸟儿,忍不住的再一次陷入回忆之中。年少的时光是多么美好啊!想想那样肆意的奔跑、跳跃,挥霍、享受。就...
    合应默阅读 157评论 0 0