Redis学习笔记---持久化

持久化

将数据从内存中以某种形式同步到硬盘中,使得重启后可以根据硬盘中的记录恢复数据,这一过程就是持久化

Redis支持两种方式的持久化:

  • RDB方式:根据指定规则“定时”将内存中的数据存储在硬盘上;
  • AOF方式:每次执行命令后将命令本身记录下来。

一、RDB方式

RDB方式的持久化是通过快照(snapshotting)完成的,当完成一定条件时Redis会自动将内存中的所有数据生成一份副本并存储在硬盘上,这个过程称为“快照”。

1.根据配置规则进行自动快照

通过redis.conf配置文件(/usr/local/etc/redis.conf),我们可以看到Redis为我们预置了3个条件:

save 900 1      # 在15分钟(900秒)内有一个或一个以上的键被更改则进行快照。
save 300 10     # 在5分钟(300秒)内至少有10个键被更改则进行快照。
save 60 10000   # 在1分钟(60秒)内至少有1000个键被更改则进行快照。

每条快照条件占一行,以SAVE参数开头。我们可以自定义这些参数,如果符合自动快照条件,Redis会自动执行快照条件。

2.用户执行SAVE或BGSAVE命令

除了自动快照,当服务重启、手动迁移以及备份时,我们需要进行手动快照操作。

1.SAVE命令

当执行SAVE命令时,Redis同步地进行快照操作,在执行快照操作中会阻塞所有来自客户端的请求。如果数据库中的数据比较多时,会导致Redis较长时间内无响应。因避免在生产环境中使用这一命令。

2.BGSAVE命令(手动时推荐)

BGSAVE命令可以在后台异步执行快照操作,快照的同时仍可接受来自客户端的请求。执行BGSAVE命令后Redis立即返回OK表示开始执行快照操作,可通过LASTSAVE命令获取最近一次成功执行快照的时间。

3.执行FLUSHALL命令

执行FLUSHALL命令时,Redis会清除数据库中的所有数据。但不论清楚数据库的过程是否触发了自动快照条件,只要自动快照条件不为空,Redis就会执行一次快照操作。

没有定义自动快照条件时,执行FLUSHALL则不会进行快照。

4.执行复制时

当设置主从模式时,Redis会在复制初始化时进行自动快照。即使没有定义自动快照条件和手动执行快照操作,也会生成RDB快照文件。

5.快照原理

快照的过程:

​ 1)Redis使用fork函数复制一份当前进程(父进程)的副本(子进程);

​ 2)父进程继续接收并处理客户端发来的命令,而子进程开始将内存中的数据写入到硬盘中的临时文件;

​ 3)当子进程写入完所有数据后会用该临时文件替换旧的RDB文件,至此一次快照操作完成。

RDB文件的路径和文件名,可以通过配置文件redis.conf中的dirdbfilename参数来设置。

RDB文件是经过压缩(可通过配置rdbcompression参数禁用压缩,默认是开启的)的二进制格式,所以占用的空间会小于内存中的数据大小,更加利于传输。

Redis启动后会读取RDB快照文件,将数据从硬盘载入到内存中。通过RDB方式实现的持久化,若Redis出现异常,就会丢失最后一次快照以后更改的所有数据。

二、AOF方式

AOF = Append Only FileAOF持久化可以降低进程中止导致的数据丢失;他可以将Redis执行的每一条写命令追加到硬盘文件中。

1.开启AOF

默认情况下,Redis是没有开启AOF的,可以通过配置文件进行开启:

appendonly yes

AOF文件的保存位置和RDB文件的位置相同,都是同过dir参数设置的,默认的文件名是appendonly.aof,可以通过appendfilename参数修改:

appendfilename appendonly.aof

2.AOF实现

AOF文件的大小达到一定条件时,Redis就会自动重写AOF文件,这个条件可以在配置文件中设置:

auto-aof-rewrite-percentage 100     # 当目前的AOF文件大小超过上一次重写时的AOF文件大小的百分之多少时,会再次进行重写,如果之前没有重写,则以启动时的AOF文件大小为依据。
auto-aof-rewrite-min-size 64mb      # 限制了允许重写的最小AOF文件大小

除了自动执行重写外,还可以手动执行AOF重写:

127.0.0.1:6379> bgrewriteaof

AOF文件和RDB文件的文件格式完全不同。

在启动Redis时会逐个执行AOF文件中的命令来将硬盘中的数据载入到内存中,载入速度相较于RDB会慢一些。

3.同步硬盘数据

在执行AOF操作时,由于操作系统的缓存机制,数据并未真正地写入硬盘,而是进入了系统的硬盘缓存中。默认情况下系统每30秒会执行一次同步操作,以便将硬盘缓存中的数据真正写入到硬盘中,如果在这期间出现异常会导致硬盘缓存中的数据丢失。这就需要通过设置参数要求系统主动将缓存内容同步要硬盘中。

# appendfsync always    # 每次执行写入都会执行同步,最安全但也最慢
appendfsync everysec    # 默认采用everysec规则,每秒执行一次同步操作。
# appendfsync no        # 不主动进行同步操作,而是交给操作系统来做(即每30秒一次),虽快但不安全

一般情况下使用默认值everysec就够了,性能和安全都有保障。

Redis允许同时开启AOFRDB


个人博客:https://jenkinwang.github.io/

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,053评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,527评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,779评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,685评论 1 276
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,699评论 5 366
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,609评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,989评论 3 396
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,654评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,890评论 1 298
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,634评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,716评论 1 330
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,394评论 4 319
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,976评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,950评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,191评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 44,849评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,458评论 2 342

推荐阅读更多精彩内容

  • 一、Redis高可用概述 在介绍Redis高可用之前,先说明一下在Redis的语境中高可用的含义。 我们知道,在w...
    空语阅读 1,593评论 0 2
  • 企业级redis集群架构的特点 海量数据 高并发 高可用 要达到高可用,持久化是不可减少的,持久化主要是做灾难恢复...
    lucode阅读 2,192评论 0 7
  • 本文是《Redis开发与运维》的学习笔记。内容大部分摘自此书。 众所周知,redis是内存数据库,它把数据存储在内...
    小北觅阅读 564评论 0 3
  • 一:快照模式 或莫过于SNAPSHOTTING模式,这个不需要反驳吧,而且你可能还知道,使用SNAPSHOTTIN...
    kevin0016阅读 626评论 0 1
  • 现在想起去外婆家的路,心里还会涌起一股股的温暖,很多很多的小时候的画面也会浮现出来。 外婆家离我们家几个村的距离,...
    爱写文字的啊头阅读 696评论 0 1