Redis高可用集群搭建

最近公司项目要求Redis集群且高可用,在查询了一系列文章,再结合项目实际情况,所以采用了这一套高可用集群方案

方案选型

Redis集群有三种方案实现:

  1. Redis官方集群方案 Redis Cluster

    这种方案是redis官方提供的,采用slot的概念,一共分成16384个槽。对key的值进行散列,分配到这16384个slot中的某一个中。但是这个Redis集群,要保证16384个槽对应的node都正常工作,如果某个node发生故障,那它负责的slots也就失效,整个集群将不能工作。这不符合我们的要求:高可用

  2. 利用代理中间件实现大规模Redis集群

    过于复杂,并且我们redis的使用量不是很大,只需要保证稳定即可(高可用)。所以这个方案也没有采纳。

  1. Redis Sentinel主从高可用方案

    部署redis主从服务(1个master,多个salve),然后通过redis官方的监控工具Sentinel(哨兵),对每个节点进行监控,实现自动故障迁移,即master死掉,将salve升级为master。基本原理是:心跳机制+投票裁决。

环境准备

  1. 下载redis源码包。地址
  2. 准备1台服务器(按照部署情况,共有5个端口)
  3. 5个端口中,1个master(6379),2个slave(6380,6381),2个sentinel(哨兵)(63791, 63792)

sentinel配置(参数配置查看附录1)

  1. 配置文件_63791(sentinel_63791.conf)

     # 端口
     port 63791
     daemonize yes
     # 很重要,见附录2
     protected-mode no
     # 日志文件
     logfile "/opt/redis-cluster/logs/sentinel_63791.log"
     #master-1
     # 监控master
     # sentinel monitor master_name ip port quorum
     # quorum是一个数字,指明当有多少个sentinel认为一个master失效时,master才算真正失效。
     sentinel monitor master-1 10.211.55.10 6381 1
     # 这个配置项指定了需要多少失效时间,一个master才会被这个sentinel主观地认为是不可用的。 单位是毫秒,默认为30秒
     sentinel down-after-milliseconds master-1 5000
     sentinel failover-timeout master-1 18000
     # 设置连接master和slave时的密码,master和slave用户名密码要一致
     sentinel auth-pass master-1 test123
     sentinel parallel-syncs master-1 1
    
  2. 配置文件_63792(sentinel_63792.conf)

     port 63792
     daemonize yes
     protected-mode no
     logfile "/opt/redis-cluster/logs/sentinel_63792.log"
     #master-1
     sentinel monitor master-1 10.211.55.10 6381 1
     sentinel down-after-milliseconds master-1 5000
     sentinel failover-timeout master-1 18000
     sentinel auth-pass master-1 test123
     sentinel parallel-syncs master-1 1
    

Master节点配置

redis_master_6379.conf 配置:

port 6379
daemonize yes
requirepass test123
masterauth test123

两个slave节点配置

  1. redis_slave_6380.conf

     port 6380
     daemonize yes
     requirepass "test123"
     slaveof 10.211.55.10 6379
     masterauth "sunhao123"
     bind 0.0.0.0
    
  2. redis_slave_6381.conf

     port 6381
     daemonize yes
     requirepass "test123"
     slaveof 10.211.55.10 6379
     masterauth "sunhao123"
     bind 0.0.0.0
    

启动服务

按如下顺序依次启动服务:

redis-server /opt/redis-cluster/redis_master_6379.conf 
redis-server /opt/redis-cluster/redis_slave_6380.conf 
redis-server /opt/redis-cluster/redis_slave_6381.conf 
redis-sentinel /opt/redis-cluster/sentinel_63791.conf 
redis-sentinel /opt/redis-cluster/sentinel_63792.conf 

查看各个节点的状态

  1. 查看全部节点状态

     [root@CentOS-3 redis-cluster]# ps aux | grep redis
     root      1782  0.0  0.0 103252   824 pts/4    S+   21:36   0:00 grep redis
     root     25331  0.1  0.3 133528  7648 ?        Ssl  18:06   0:20 redis-server 0.0.0.0:6380                            
     root     25336  0.1  0.5 135576  9720 ?        Ssl  18:06   0:21 redis-server 0.0.0.0:6381                            
     root     29303  0.2  0.4 133524  7700 ?        Ssl  18:27   0:32 redis-sentinel *:63791 [sentinel]                    
     root     29308  0.2  0.4 133524  7704 ?        Ssl  18:27   0:33 redis-sentinel *:63792 [sentinel]                    
     root     29486  0.1  0.3 133528  7648 ?        Ssl  18:28   0:18 redis-server 0.0.0.0:6379
    
  2. 查看master状态

     [root@CentOS-3 redis-cluster]# redis-cli -h 10.211.55.10 -p 6379
     10.211.55.10:6379> auth test123
     OK
     10.211.55.10:6379> info replication
     # Replication
     role:master
     connected_slaves:2
     slave0:ip=10.211.55.10,port=6380,state=online,offset=1568095,lag=1
     slave1:ip=10.211.55.10,port=6381,state=online,offset=1568095,lag=1
     master_repl_offset:1568095
     repl_backlog_active:1
     repl_backlog_size:1048576
     repl_backlog_first_byte_offset:519520
     repl_backlog_histlen:1048576
     10.211.55.10:6379> 
    
  3. 查看slave的状态:

     [root@CentOS-3 redis-cluster]# redis-cli -h 10.211.55.10 -p 6380
     10.211.55.10:6380> auth test123
     OK
     10.211.55.10:6380> info replication
     # Replication
     role:slave
     master_host:10.211.55.10
     master_port:6379
     master_link_status:up
     master_last_io_seconds_ago:1
     master_sync_in_progress:0
     slave_repl_offset:1578354
     slave_priority:100
     slave_read_only:1
     connected_slaves:0
     master_repl_offset:0
     repl_backlog_active:0
     repl_backlog_size:1048576
     repl_backlog_first_byte_offset:0
     repl_backlog_histlen:0
     10.211.55.10:6380> 
    
  4. 查看sentinel的状态:

     [root@CentOS-3 redis-cluster]# redis-cli -h 10.211.55.10 -p 63791
     10.211.55.10:63791> info sentinel
     # Sentinel
     sentinel_masters:1
     sentinel_tilt:0
     sentinel_running_scripts:0
     sentinel_scripts_queue_length:0
     sentinel_simulate_failure_flags:0
     master0:name=master-1,status=ok,address=10.211.55.10:6379,slaves=2,sentinels=2
     10.211.55.10:63791> 
    

验证redis sentinel的主从切换:

  1. 首先关闭master节点,即kill掉master进程

  2. 查看sentinel服务,发现端口6381升级为master节点,这时sentinel完成故障自动切换。

     [root@CentOS-3 redis-cluster]# redis-cli -h 10.211.55.10 -p 63791
     10.211.55.10:63791> info sentinel
     # Sentinel
     sentinel_masters:1
     sentinel_tilt:0
     sentinel_running_scripts:0
     sentinel_scripts_queue_length:0
     sentinel_simulate_failure_flags:0
     master0:name=master-1,status=ok,address=10.211.55.10:6381,slaves=2,sentinels=2
     10.211.55.10:63791> 
    
  3. 启动刚才被shutdown的6379服务并查看,发现它变成了slave服务。

     [root@CentOS-3 redis-cluster]# redis-cli -h 10.211.55.10 -p 6379
     10.211.55.10:6379> auth test123
     OK
     10.211.55.10:6379> info replication
     # Replication
     role:slave
     master_host:10.211.55.10
     master_port:6381
     master_link_status:up
     master_last_io_seconds_ago:2
     master_sync_in_progress:0
     slave_repl_offset:15074
     slave_priority:100
     slave_read_only:1
     connected_slaves:0
     master_repl_offset:0
     repl_backlog_active:0
     repl_backlog_size:1048576
     repl_backlog_first_byte_offset:0
     repl_backlog_histlen:0
     10.211.55.10:6379> 
    

附录

  1. Redis搭建sentinel,无法主从自动切换,一直卡在-sdown sentinel

    redis-sentinel有保护模式,所以要将这个模块关闭!

     protected-mode no
    
  2. redis-sentinel配置项详细说明

    参考链接

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,590评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 86,808评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,151评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,779评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,773评论 5 367
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,656评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,022评论 3 398
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,678评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 41,038评论 1 299
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,659评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,756评论 1 330
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,411评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,005评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,973评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,203评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,053评论 2 350
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,495评论 2 343

推荐阅读更多精彩内容

  • 主从配置 主redis:master-ip port从redis:slave-ip port 设置主从redis配...
    Uncle阳阅读 2,056评论 3 3
  • Codis高可用方案官方推荐使用Sentinel Redis 本身就是最终一致性的。Master 挂了,Promo...
    三杯水Plus阅读 2,720评论 2 8
  • 在没有接触到湖南鱼粉之前,我以为粉也就是桂林米粉、沙县炒粉、南昌拌粉了。在接触湖南的鱼粉之后,惊奇的是原来有一种粉...
    杨群Nice阅读 1,642评论 0 0
  • 冰冰是我的客户,今年43岁。在二月初一个春寒料峭的上午我接到了她打进公司的电话,她的声音柔柔的,慢慢的,非常有礼貌...
    葡萄姑娘阅读 365评论 0 0
  • 浑浑噩噩30多年过去了,生活还是一团糟,这么多年一直在追逐成功的路上,而今却发现离成功越来越遥远。突然想简单的生活...
    壹唯阅读 127评论 0 0