redis知识点总结

redis优势

  • 1、高速读写访问,Redis能读的速度是110000次/s,写的速度是81000次/s 。
  • 2、海量数据存储,支持分布式,数据一致性保证。方便的集群节点增删
  • 3、丰富的数据类型 – Redis支持二进制案例的 Strings, Lists, Hashes, Sets 及 Ordered Sets 数据类型操作
  • 4、原子 – Redis的所有操作都是原子性的,意思就是要么成功执行要么失败完全不执行。单个操作是原子性的。多个操作也支持事务,即原子性,通过MULTI和EXEC指令包起来
  • 5、丰富的特性 – Redis还支持 publish/subscribe, 通知, key 过期等等特性

redis缺点

  • 数据库容量受到物理内存的限制,不能用作海量数据的高性能读写,因此Redis适合的场景主要局限在较小数据量的高性能操作和运算上。
  • Redis 不具备自动容错和恢复功能,主机从机的宕机都会导致前端部分读写请求失败,需要等待机器重启或者手动切换前端的IP才能恢复。
  • 主机宕机,宕机前有部分数据未能及时同步到从机,切换IP后还会引入数据不一致的问题,降低了系统的可用性。
  • Redis 较难支持在线扩容,在集群容量达到上限时在线扩容会变得很复杂。为避免这一问题,运维人员在系统上线时必须确保有足够的空间,这对资源造成了很大的浪费。

使用场景

  • 1、高并发查询的地方。秒杀
  • 2、不经常更新,但经常查询的地方。如:商品分类
  • 3、频繁记录,统计。如用户登陆统计
  • 4、分布式锁
  • 5、数据永久性存储

常见的数据类型

  • 1、set
    • set是string类型的无序集合.集合是通过hashtable实现的,可以进行交集,并集,差集等等.复杂度为O(1)
  • 2、zset
    • zset set是string类型的无序集合,且不允许重复的成员
  • 3、list
    • list双向链表,按照插入有序,可以添加一个元素在列表的头部或者尾部
  • 4、hash
    • hash是一个string类型的field和value的映射表,hash特别适合用于存储对象。
  • 5、string
    • string是redis的基本类型,一个key对应一个value。是二进制安全的,最大存储512MB
类型 简介 特征 常用命令 场景
string key-value, 二进制安全 可以包含任何数据,jpg图片或者序列化对象等,最大512MB set、get、setex、incr、decr 接口访问频率限制、计数等等
hash key-value,相对于开发中的map 特别适合存储对象,每个hash可以存2^32 - 1键值对 hset、hmset、hget、hgetall、hexists、hlen 存在、读取、修改订单信息
list 双向链表 插头顺序排列,可以添加一个元素到列表的头部或者尾部, 一个列表最多可以包含2^32-1个元素 lpush、lrange、llen、lpop、rpush、rpop、lindex 排队秒杀、消息队列
set 哈希列表,无序集合,元素不重复 交集,并集,差集功能,集合成员是唯一的,这就意味着集合中不能出现重复的数据。集合对象的编码可以是 intset 或者 hashtable。 集合最多成员数为2^32-1 sadd、smembers、sdiff、sinter、sunion 共同好友,推荐商品
sorted set 有序集合,且不允许重复的成员 不同的是每个元素都会关联一个 double 类型的分数。redis 正是通过分数来为集合中的成员进行从小到大的排序,集合中最大的成员数为2^32 - 1 zadd、zrange、zcount、zcard 带权重的消息队列、排行榜

redis持久化机制

1、RDB (redis database)

  • RDB是redis默认的持久化方式。按照一定的时间将内存中的数据以数据快照的方式保存到硬盘中,对应产生的数据文件为dump.rdb。通过配置文件中的save参数来定义快照的周期
  • 优点:
    • 只有一个dump.rdb,方便持久化
    • 容灾性好,一个文件可以保存在安全的磁盘中
    • 性能最大化,fork子进程来完成写操作,让主进程继续处理命令,所以是IO最大化。使用单独子进程来进行持久化,主进程不会进行任何IO操作,保证了redis的高性能
    • 相对于大数据集时,比AOF的启动效率高
  • 缺点:
    • 数据安全性低。RDB是间隔时间进行持久化。如果在持久化期间redis发生故障,会丢失数据

2、AOF (append-only file)

  • AOF持久化,则是将redis执行的每次写命令记录到单独的日志文件中,当重启redis会重新将持久化的日志中文件恢复数据
  • 优点:
    • 数据安全,aof持久化可以配置appendfsync属性,有always,每进行一次命令操作就记录到aof文件中一次
    • 通过append模式写文件,即使中途服务器宕机,可以通过redis-check-aof工具解决数据一致性问题
    • aof机制的rewrite模式,aof文件没被rewrite之前,可以删除其中的某些命令
  • 缺点:
    • AOF文件比RDB文件大,且恢复速度慢
    • 数据集大时,比RDB启动效率低

redis过期键删除策略

  • redis过期策略有以下三种:
    • 定时过期:每个设置过期时间的可以都需要创建一个定时器,到过期时间就会立即清除。该策略可以立即清除过期的数据,对内存很友好;但是会占用大量的cpu资源,从而影响缓存的响应时间和吞吐量
    • 惰性过期:当有访问一个key时,才会判断这个key是否已过期,过期则清除。该策略可以最大化的节省cpu资源,但对内存非常不友好。极端情况可能出现大量的key没有再次被访问,从而不能被清除,占用大量内存
    • 定期过期:每隔一段时间,会扫描一定数量的数据库的expires字典中的一定数量的key,并清除其中已经过期的key。改策略是前两者的一个折中方案。通过调整定时扫描时间间隔和每次扫描的限定耗时,可以在不同情况下使得cpu和内存资源达到最优的平衡效果

常见问题

1、缓存穿透

  • 缓存穿透:
    • 当查询Redis中没有的数据时,该查询会下沉到数据库层,同时数据库层也没有该数据,当这种情况大量出现或被恶意攻击时,接口的访问全部透过Redis访问数据库,而数据库中也没有这些数据,我们称这种现象为"缓存穿透"。缓存穿透会穿透Redis的保护,提升底层数据库的负载压力,同时这类穿透查询没有数据返回也造成了网络和计算资源的浪费。
  • 解决方案:
    • 在接口访问层对用户做校验,如接口传参、登陆状态、n秒内访问接口的次数;
    • 利用布隆过滤器,将数据库层有的数据key存储在位数组中,以判断访问的key在底层数据库中是否存在;

2、缓存击穿

  • 缓存穿透:
    • 当查询Redis时,底层数据库有数据而缓存内没有数据。当热点数据key从缓存内失效时,大量访问同时请求这个数据,就会将查询下沉到数据库层,此时数据库层的负载压力会骤增,我们称这种现象为"缓存击穿"
  • 解决方案:
    • 延长热点key的过期时间或者设置永不过期,如排行榜,首页等一定会有高并发的接口;
    • 利用互斥锁保证同一时刻只有一个客户端可以查询底层数据库的这个数据,一旦查到数据就缓存至Redis内,避免其他大量请求同时穿过Redis访问底层数据库;

3、缓存雪崩

  • 缓存雪崩:
    • 缓存雪崩是缓存击穿的"大面积"版,缓存击穿是数据库缓存到Redis内的热点数据失效导致大量并发查询穿过redis直接击打到底层数据库,而缓存雪崩是指Redis中大量的key几乎同时过期,然后大量并发查询穿过redis击打到底层数据库上,此时数据库层的负载压力会骤增,我们称这种现象为"缓存雪崩
  • 解决方案:
    • 在可接受的时间范围内随机设置key的过期时间,分散key的过期时间,以防止大量的key在同一时刻过期;
    • 对于一定要在固定时间让key失效的场景(例如每日12点准时更新所有最新排名),可以在固定的失效时间时在接口服务端设置随机延时,将请求的时间打散,让一部分查询先将数据缓存起来;
    • 延长热点key的过期时间或者设置永不过期,这一点和缓存击穿中的方案一样;
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 205,132评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,802评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,566评论 0 338
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,858评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,867评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,695评论 1 282
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,064评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,705评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 42,915评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,677评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,796评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,432评论 4 322
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,041评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,992评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,223评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,185评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,535评论 2 343

推荐阅读更多精彩内容

  • redis 1.redis含义 redis是一个开源的使用ANSI C编写、遵循BSD协议(允许使用者二次开发)、...
    陽_young阅读 469评论 0 0
  • 1、为什么用redis? 主要是从:性能和并发两方面考虑(1)性能:我们在碰到需要执行耗时特别久,且结果不频繁变动...
    xiaoqunzi233阅读 242评论 0 0
  • NoSQL介绍和redis介绍 not only SQL:非关系型数据库; 作用:应用于海量数据用户数据的前提下的...
    longLiveData阅读 277评论 0 0
  • 一、redis介绍 redis是一个开源的、使用C语言编写的、支持网络交互的、可基于内存也可持久化的Key-Val...
    凤凤思密达萌萌哒阅读 162评论 0 0
  • 本文是我自己在秋招复习时的读书笔记,整理的知识点,也是为了防止忘记,尊重劳动成果,转载注明出处哦!如果你也喜欢,那...
    波波波先森阅读 3,422评论 0 40