redis-数据库一致性

by shihang.mai

注意贯穿全文:引入缓存的目的就是提速
注意贯穿全文:引入缓存的目的就是提速
注意贯穿全文:引入缓存的目的就是提速
重要事情说3遍!!!!

1. 引入缓存导致的问题

引入redis确实能提速,但是也引入了一个数据库-缓存数据一致性的问题。这正是本文讨论的焦点

我们大可以这样做:

  1. 将数据库数据全部放到redis,并且不设置ttl,这样可以做到redis全部命中
  2. 写请求还是操作库,保持库是最新的数据
  3. 然后启动一个定时任务,定时将库最新的数据刷新到redis

但是这个方案也有明显的缺点

  1. redis利用率低,因为不经常访问的数据都在redis中了
  2. 缓存和数据库的一致性有一定延时

2. 同时更新缓存和数据库方案

2.1 缓存利用低

我们可以这么做

  1. 写请求还是操作库,保持库是最新的数据
  2. 读请求先读redis,如果redis不存在,则从数据库读取,并重建redis
    同时,写入redis中的数据,都设置ttl

这样就可以做到redis中的数据都是热数据,缓存利用率提高。

2.2 一致性延迟

在1中的方案的延时,取决于定时任务的频率。那么我们就不用定时任务了。我们可以这么做,当更新数据时,同时更新数据库和缓存即可。但问题来了,更新两者的先后问题。

  1. 先更新缓存,后更新数据库
  2. 先更新数据库,后更新缓存

其实,在没异常和没并发的情况下,两个顺序都没问题

2.3 (异常、并发)和顺序的关系

2.3.1 异常和顺序的关系

1. 先更新缓存,后更新数据库
or
2. 先更新数据库,后更新缓存

因为有异常,那么会导致第一步成功,第二部失败的情况

2.3.1.1 先更新缓存,后更新数据库

如果缓存更新成功了,但数据库更新失败

那么此时缓存中是最新值,但数据库中是旧值

虽然此时读请求可以命中缓存,拿到正确的值,但是,一旦ttl失效,然后请求从数据库中读取到旧值,重建缓存也是这个旧值。

这时Clinet会发现自己之前修改的数据又「变回去」了,对业务造成影响

2.3.1.2 先更新数据库,后更新缓存

如果数据库更新成功了,但缓存更新失败

那么此时数据库中是最新值,缓存中是旧值。

之后的读请求读到的都是旧数据,只有当ttl失效后,才能从数据库中得到正确的值。

这时Clinet会发现,自己刚刚修改了数据,但却看不到最新数据,一段时间过后,数据才变更过来,对业务也会有影响


一句话总结: 无论哪个顺序都有问题

2.3.2 并发和顺序的关系

这里先说,在并发情况下,无论哪个顺序都一样有问题,我就选个
先更新数据库,后更新缓存来说明问题吧

有线程 A 和线程 B 两个线程,需要更新同一条数据。A线程将age = 18,B线程将age= 28
1. 线程 A 更新数据库 age = 18
2. 线程 B 更新数据库 age = 28
3. 线程 B 更新缓存 age = 28
4. 线程 A 更新缓存 age = 18
结果明显了,数据库age = 28 缓存age = 18

3. 删除缓存方案

这个方案也会有顺序。

1. 先更新数据库,后删除缓存
or
2. 先删除缓存,后更新数据库

3.1 (异常、并发)和顺序的关系

3.1.1 异常和顺序的关系

1. 先更新数据库,后删除缓存
or
2. 先删除缓存,后更新数据库

因为有异常,那么会导致第一步成功,第二部失败的情况

3.1.1.1 先更新数据库,后删除缓存

略了,自己分析吧,你们行的

3.1.1.2 先删除缓存,后更新数据库

略了,自己分析吧,你们行的

3.2.1 并发和顺序的关系

这里先说,在并发情况下,这次例子是读写并发,无论哪个顺序都一样有问题。只是概率问题

3.2.1.1 先删除缓存,后更新数据库

有线程 A 和线程 B 两个线程,同时针对同一条数据,原值age = 28,A线程将age = 18,B线程读数据
1. A线程删除缓存
2. B线程读取缓存,发现没,直接读数据库age = 28
3. A线程将数据库age = 18
4. B线程重建缓存,缓存age = 28
结果明显了,数据库age = 18 缓存age = 28

3.2.1.2 先更新数据库,后删除缓存

有线程 A 和线程 B 两个线程,同时针对同一条数据,原值age = 28,A线程将age = 18,B线程读数据
1. B线程读取数据库,读到age = 28
2. A线程将数据库age = 18
3. A线程删除缓存
4. B线程重建缓存,缓存age = 28
结果明显了,数据库age = 18 缓存age = 28

还是一句话: 无论哪个顺序都有问题

那是不是搞不了?其实我们分析一下吧,说的是一致性问题注意。

  • 先删除缓存,后更新数据库
    这种情况发生,只需要读写并发,概率很大
  • 先更新数据库,后删除缓存
    这种情况发生需要【读写并发】【缓存刚失效】【步骤2+3的时间<步骤1+4的时间】,兄弟,步骤2写操作要对数据库加锁的,所以说,概率低而已

既然哪种都不行,我们就选个概率低的吧,下面全部讨论
先更新数据库,后删除缓存
到此解决了并发的问题,但是我们上面提到的异常情况还没解决,接下来我们来解决异常的情况的问题

4. 解决异常问题

其实最简单的办法就是重试。但是重试有下面几点明显的问题

  1. 一般立即重试,一般会继续失败
  2. 就算你设置了休眠时间,那重试多少次合适呢?
  3. 重试还会一直占用当前线程呢

既然这样,我们换一种想法,用异步重试即可,我们可以用项目中经常用到的MQ

  1. 先写数据库
  2. 向MQ写消息
  3. 消费者消费消息,删除redis

还有另外一个方案,直接引入canal,这样

  1. 先写数据库
  2. canal监听binlog的变化,然后投递到MQ
  3. 消费者消费消息,删除redis

到现在我们使用先写数据库,再删缓存的方式去保证一致性,其中删除缓存使用MQ或者canal配合

5. mysql读写分离+主从复制延迟

就算我们使用【先写数据库,再删缓存】,在 【mysql读写分离+主从复制延迟】其实还是会导致问题的

有线程 A 和线程 B 两个线程,同时针对同一条数据,原值age = 28,A线程将age = 18,B线程读数据
1. 线程 A 更新主库 age = 18
2. 线程 A 删除缓存
3. 线程 B 查询缓存,没有命中,查询从库得到旧值age = 28
3. 从库同步主库完成age = 18
4. 线程 B 将age = 28写入缓存
结果明显了,数据库age = 18 缓存age = 28

这就引出了缓存延时双删方案,但是这个方案这个时间其实在高并发环境中很难估计,只是降低不一致的概率

  1. 先写数据库
  2. 删除缓存
  3. 发送延时消息到MQ,消费者再删除缓存一次

6. 思考

所以可以用分布式锁做强一致,但是引入缓存在文章开头已经说过,是为了性能,要强一致,必然会导致性能急剧下降。矛盾呀,矛盾呀!

©著作权归作者所有,转载或内容合作请联系作者
禁止转载,如需转载请通过简信或评论联系作者。
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 206,126评论 6 481
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 88,254评论 2 382
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 152,445评论 0 341
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 55,185评论 1 278
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 64,178评论 5 371
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,970评论 1 284
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,276评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,927评论 0 259
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,400评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,883评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,997评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,646评论 4 322
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,213评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,204评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,423评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,423评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,722评论 2 345

推荐阅读更多精彩内容