Redis持久化——AOF(Append Only File)

一、是什么?

  • 以日志的形式来记录每个写操作,将Redis执行过的所有写指令记录下来(读操作不记录),只许追加文件但不可以改写文件,redis启动之初会读取该文件重新构建数据,换言之,redis重启的话就根据日志文件的内容将写指令从前到后执行一次以完成数据的恢复工作。

优势

  • 每次修改同步:appendfsync always 同步持久化 每次发生数据变更会被立即记录到磁盘 ,性能较差但数据完整性比较好。
  • 每秒同步:appendfsync everysec 异步操作,每秒记录 如果一秒内宕机,有数据丢失。
  • 不同步:appendfsync no 从不同步。

劣势

  • 相同数据集的数据而言AOF文件要远大于RDB文件,恢复速度慢于RDB。
  • AOF运行效率要慢于RDB,每秒同步策略效率较好,不同步效率和RDB相同。

二、AOF介绍

  • 可以同时启用AOF和RDB持久化,不会出现任何问题。
  • 在启动Redis服务时, 如果启用了AOF,则Redis将加载AOF文件进行数据恢复,这是是具有更好持久性保证的文件。

三、AOF启动配置

# 开启AOF持久化,默认:no,开启改为 yes
appendonly no
# AOF文件的名字,建议使用默认值。
appendfilename "appendonly.aof"

# Redis支持三种不同的备份模式:
# always:同步持久化 每次发生数据变更会被立即记录到磁盘  性能较差但数据完整性比较好
# everysec:出厂默认推荐,异步操作,每秒记录   如果一秒内宕机,有数据丢失
# no:不要fsync,只要让操作系统在需要的时候刷新数据即可。得更快。
# appendfsync always
appendfsync everysec
# appendfsync no

# 重写时是否可以运用Appendfsync,用默认no即可,保证数据安全性。
no-appendfsync-on-rewrite no

# 设置重写的基准值
# 指定百分比为0,以禁用自动AOF重写特性。
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb

四、AOF恢复 (RDB同理)

正常恢复

  • 将有数据的AOF文件复制一份保存到对应目录(config get dir)
  • 恢复:重启redis然后重新加载

异常恢复

  • 备份被写坏的AOF文件
  • 修复:执行 redis-check-aof --fix appendonly.aof 进行修复。
  • 重启redis然后重新加载

AOF重写

是什么?

  • AOF采用文件追加的方式,文件会越来越大。为避免出现此种情况,新增了重写机制,当AOF文件的大小超过所设定的阈值时,Redis就会启动AOF文件的内容压缩,只保留可以恢复数据的最小指令集,可以使用命令bgrewriteaof。

重写原理:

  • AOF文件因持续增长而过大时,会fork出一条新进程来将文件重写(也是先写临时文件最后再rename),遍历新进程的内存中数据,每条记录有一条的set语句。重写AOF文件的操作,并没有读取旧的AOF文件,而是将整个内存中的数据库内容用命令的方式重写了一个新的aof文件,这点和快照有点类似。

触发机制:

  • Redis会记录上次重写时的AOF大小。
  • 默认配置是:当AOF文件大小是上次rewrite后大小的一倍且文件大于64M时触发

五、总结

AOF.png
  • AOF文件是一个只进行追加的日志文件。
  • Redis 可以在AOF文件体积变得过大时。自动地在后台对AOF进行重写。
  • AOF文件有序的保存了对数据库执行的所有写入操作,这些写入操作以Redis协议的格式保存,因此AOF文件的内容非常容易被人读懂,对文件进行分析也很轻松。
  • 对于相同的数据集来说,AOF文件的体积通常大于RBD文件的体积。
  • 根据所使用的的fsync策略,AOF的速度可能慢于RDB。
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 199,636评论 5 468
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 83,890评论 2 376
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 146,680评论 0 330
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 53,766评论 1 271
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 62,665评论 5 359
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,045评论 1 276
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,515评论 3 390
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,182评论 0 254
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,334评论 1 294
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,274评论 2 317
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,319评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,002评论 3 315
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,599评论 3 303
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,675评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,917评论 1 255
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,309评论 2 345
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 41,885评论 2 341

推荐阅读更多精彩内容

  • 一、Redis高可用概述 在介绍Redis高可用之前,先说明一下在Redis的语境中高可用的含义。 我们知道,在w...
    空语阅读 1,593评论 0 2
  • 企业级redis集群架构的特点 海量数据 高并发 高可用 要达到高可用,持久化是不可减少的,持久化主要是做灾难恢复...
    lucode阅读 2,191评论 0 7
  • 最近忙工作,加上状态不佳, 有点懈怠,得想办法打起精神来才行![二哈] 往期回顾: 《30天学会绘画》总结笔记(一...
    黄瑶的简书阅读 457评论 0 3
  • 若不能自渡, 何以清扫庭宇高台。 若不能自省, 何以丈量得失成败。 若不能自控, 何以抽身是非漩涡。 若不能自如,...
  • 2019112 金泉定下采风事, 三九无忧来报名。 雅集读经游程定, 唯期天下祖庭行。 腊八采风五祖行 主办单位:...
    飞雪姐姐阅读 447评论 0 3