哨兵模式
- 概念
- 单机单个哨兵
- 多哨兵模式
- 动手实操
- 1、环境准备
- 2、配置sentinel.conf配置文件
- 3、启动哨兵&测试
- 4、SpringBoot测试哨兵模式故障转移功能
概念
主从切换技术的方法是:当主服务器宕机后,需要手动把一台从服务器切换为主服务器,这就需要人工干预,费事费力,还会造成一段时间内服务不可用。这不是一种推荐的方式,更多时候,我们优先考虑哨兵模式。
哨兵模式优缺点
优点:
- 哨兵集群,基于主从复制模式,所有主从复制的优点,它都有
- 主从可以切换,故障可以转移,系统的可用性更好
- 哨兵模式是主从模式的升级,手动到自动,更加健壮
缺点:
- Redis不好在线扩容,集群容量一旦达到上限,在线扩容就十分麻烦
- 实现哨兵模式的配置其实是很麻烦的,里面有很多配置项
单机单个哨兵
哨兵的作用:
- 通过发送命令,让Redis服务器返回监控其运行状态,包括主服务器和从服务器。
- 当哨兵监测到master宕机,会自动将slave切换成master,然后通过发布订阅模式通知其他的从服务器,修改配置文件,让它们切换主机。
多哨兵模式
动手实操
1、环境准备
三台centos7虚拟机
节点 | IP | PORT |
---|---|---|
LBJ | 192.168.3.131 | 6379 |
slave01 | 192.168.3.137 | 6379 |
slave02 | 192.168.3.138 | 6379 |
/ | 192.168.3.131 | 26379 |
/ | 192.168.3.137 | 26379 |
/ | 192.168.3.138 | 26379 |
默认已经都安装好redis了,redis默认安装路径在/usr/local/bin
,我分别在三台服务器的redis安装目录下,创建了一个kconfig
文件夹存放redis.conf
、sentinel.conf
2、配置sentinel.conf配置文件
- 按照主从复制模式,搭建一主两从
- 192.168.3.131 为主服务器,192.168.3.137、192.168.3.138 为从服务器,在上一篇文章中,已搭建好主从模式
- 一主二从都分别搭建哨兵节点
1)禁止保护模式
2) sentinel monitor mymaster 127.0.0.1 6379 2
其中mymaster为监控对象起的服务器名称,可以自定义,ip地址:监控的主服务,端口为master 服务器port, 2表示至少有多少个哨兵同意迁移的数量,即2个以上哨兵认为主服务器不可以用事,才进行客观下线。单个哨兵监测到主服务不可用,仅仅只是主观下线,需要客观下线才算数
- 修改sentinel.conf 将 默认的
sentinel monitor mymaster 127.0.0.1 6379 2
改为
sentinel monitor mymaster 192.168.3.131 6379 2
3)sentinel auth-pass mymaster 123456
由于我们的主服务器设置了密码,所以需要手动配置一下
sentinel auth-pass mymaster 123456
3、启动哨兵&测试
此处默认主从模式
已经部署,同时redis已经开启
1)分别启动所有节点的哨兵
redis-sentinel kconfig/sentinel.conf
可以看到哨兵监听到主服务器
2)关闭主服务器,查看哨兵信息
我们可以发现192.168.3.131
主服务不可用了,过了30秒,哨兵模式 投票 将 从服务器 192.168.3.137
选举为主服务器
这里面的有一个时间间隔,实际上是服务下线修复的时间,可以在sentinel.conf配置文件里配置
sentinel down-after-milliseconds <master-name> <milliseconds>,默认:30s
3)重启原本宕机的主服务
由于137已经成为master
了,重新回来的131,只能当slave
了
但是原本宕机,现在重新加入的节点,还无法同步最新master
的状态
131继续宕机,也只是作为slave宕机,137哨兵会监测到,并主观下线131
在Redis的哨兵模式下,当一个主服务器宕机后重新开启,并且成为一个从服务器(slave),它不会自动同步新的主服务器(master)的状态,这是因为Redis的复制机制是单向的。换句话说,一个从服务器只能复制主服务器的数据,而不能向主服务器发送数据。
当一个主服务器重新启动后成为从服务器,它会尝试连接之前的主服务器(即它断开连接之前的主服务器),并尝试从该主服务器那里进行同步。如果之前的主服务器仍然可用并且数据没有被清除,那么重新启动的从服务器会尝试复制之前的主服务器的数据,而不会连接到新的主服务器。
要解决这个问题,可以通过以下步骤来手动配置重新启动的从服务器以连接到新的主服务器:
-
在重新启动的从服务器上,修改配置文件,将新的主服务器的地址和端口更新为主服务器的地址和端口。
-
重启从服务器,使其连接到新的主服务器并开始同步数据。
-
确保重新启动的从服务器可以与新的主服务器建立连接并成功同步数据。可以通过监视从服务器的日志文件或使用Redis命令检查同步状态。
-
如果有必要,可以重新配置哨兵以将重新启动的从服务器纳入监控,并在必要时进行故障转移。
通过执行以上步骤,重新启动的从服务器应该能够成功连接到新的主服务器并同步数据,从而与新的主服务器保持同步状态。
4) 完整的哨兵模式配置文件 sentinel.conf
# Example sentinel.conf# 哨兵sentinel实例运行的端口 默认26379
port 26379# 哨兵sentinel的工作目录
dir /tmp# 哨兵sentinel监控的redis主节点的 ip port
# master-name 可以自己命名的主节点名字 只能由字母A-z、数字0-9 、这三个字符".-_"组成。
# quorum 当这些quorum个数sentinel哨兵认为master主节点失联 那么这时 客观上认为主节点失联了
# sentinel monitor <master-name> <ip> <redis-port> <quorum>
sentinel monitor mymaster 127.0.0.1 6379 1# 当在Redis实例中开启了requirepass foobared 授权密码 这样所有连接Redis实例的客户端都要提供密码
# 设置哨兵sentinel 连接主从的密码 注意必须为主从设置一样的验证密码
# sentinel auth-pass <master-name> <password>
sentinel auth-pass mymaster MySUPER--secret-0123passw0rd# 指定多少毫秒之后 主节点没有应答哨兵sentinel 此时 哨兵主观上认为主节点下线 默认30秒
# sentinel down-after-milliseconds <master-name> <milliseconds>
sentinel down-after-milliseconds mymaster 30000# 这个配置项指定了在发生failover主备切换时最多可以有多少个slave同时对新的master进行 同步,
这个数字越小,完成failover所需的时间就越长,
但是如果这个数字越大,就意味着越 多的slave因为replication而不可用。
可以通过将这个值设为 1 来保证每次只有一个slave 处于不能处理命令请求的状态。
# sentinel parallel-syncs <master-name> <numslaves>
sentinel parallel-syncs mymaster 1# 故障转移的超时时间 failover-timeout 可以用在以下这些方面:
#1. 同一个sentinel对同一个master两次failover之间的间隔时间。
#2. 当一个slave从一个错误的master那里同步数据开始计算时间。直到slave被纠正为向正确的master那里同步数据时。
#3.当想要取消一个正在进行的failover所需要的时间。
#4.当进行failover时,配置所有slaves指向新的master所需的最大时间。不过,即使过了这个超时,slaves依然会被正确配置为指向master,但是就不按parallel-syncs所配置的规则来了
# 默认三分钟
# sentinel failover-timeout <master-name> <milliseconds>
sentinel failover-timeout mymaster 180000# SCRIPTS EXECUTION#配置当某一事件发生时所需要执行的脚本,可以通过脚本来通知管理员,例如当系统运行不正常时发邮件通知相关人员。
#对于脚本的运行结果有以下规则:
#若脚本执行后返回1,那么该脚本稍后将会被再次执行,重复次数目前默认为10
#若脚本执行后返回2,或者比2更高的一个返回值,脚本将不会重复执行。
#如果脚本在执行过程中由于收到系统中断信号被终止了,则同返回值为1时的行为相同。
#一个脚本的最大执行时间为60s,如果超过这个时间,脚本将会被一个SIGKILL信号终止,之后重新执行。#通知型脚本:当sentinel有任何警告级别的事件发生时(比如说redis实例的主观失效和客观失效等等),将会去调用这个脚本,
#这时这个脚本应该通过邮件,SMS等方式去通知系统管理员关于系统不正常运行的信息。调用该脚本时,将传给脚本两个参数,
#一个是事件的类型,
#一个是事件的描述。
#如果sentinel.conf配置文件中配置了这个脚本路径,那么必须保证这个脚本存在于这个路径,并且是可执行的,否则sentinel无法正常启动成功。
#通知脚本
# sentinel notification-script <master-name> <script-path>sentinel notification-script mymaster /var/redis/notify.sh# 客户端重新配置主节点参数脚本
# 当一个master由于failover而发生改变时,这个脚本将会被调用,通知相关的客户端关于master地址已经发生改变的信息。
# 以下参数将会在调用脚本时传给脚本:
# <master-name> <role> <state> <from-ip> <from-port> <to-ip> <to-port>
# 目前<state>总是“failover”,
# <role>是“leader”或者“observer”中的一个。
# 参数 from-ip, from-port, to-ip, to-port是用来和旧的master和新的master(即旧的slave)通信的
# 这个脚本应该是通用的,能被多次调用,不是针对性的。
# sentinel client-reconfig-script <master-name> <script-path>
sentinel client-reconfig-script mymaster /var/redis/reconfig.sh
4、SpringBoot测试哨兵模式故障转移功能
先关闭所有的redis主从节点和哨兵节点,重启发现,137依然还是master,说明故障转移后,主从关系确定下来后,将不再发生变化
初始状态,键值对情况
1)application.yml
spring:redis:# 配置哨兵sentinel:# 主服务器名称master: mymaster# 哨兵节点nodes: 192.168.3.131:26379,192.168.3.137:26379,192.168.3.138:26379# 登录密码password: 123456# Jedis配置jedis:# 连接池配置pool:# 最大等待1秒max-wait: 1s# 最大空闲连接数max-idle: 10# 最大活动连接数max-active: 20# 最小空闲连接数min-idle: 5# 配置Redis集群信息cluster:# 集群节点信息nodes: 192.168.3.131:6379,192.168.3.137:6379,192.168.3.138:6379# 最大重定向数,一般设置为5,# 不建议设置过大,过大容易引发重定向过多的异常max-redirects: 5password: 123456
2)controller
@GetMapping("/test")public String test() {return "test";}// 注入StringRedisTemplate对象,该对象操作字符串,由Spring Boot机制自动装配@Autowiredprivate StringRedisTemplate stringRedisTemplate = null;// 测试Redis写入@GetMapping("/write")public Map<String, String> testWrite() {Map<String, String> result = new HashMap<>();result.put("666LBJ666", "value1");stringRedisTemplate.opsForValue().multiSet(result);return result;}// 测试Redis读出@GetMapping("/read")public Map<String, String> testRead() {Map<String, String> result = new HashMap<>();result.put("666LBJ666", stringRedisTemplate.opsForValue().get("666LBJ666"));return result;}
3)写入键值对
4)当137master宕机,测试是否可以故障转移,并保证可用
删掉刚写入的键值对
再次请求,写入
5)读取一下键值对
至此redis-哨兵模式搭建与测试功能完毕