Redis 主从复制+哨兵+集群

1、总结写在前面

Redis 集群 = 数据分片 + 高可用性

Redis 哨兵 = 主从复制 + 故障转移

2、主从复制

2.1、准备配置

查看docker 容器 ip

docker inspect 容器id | grep IPAddressdocker inspect -f='{{.Name}} {{.NetworkSettings.IPAddress}}' $(docker ps -aq)

修改配置文件

初始配置文件见 => redis.conf

  • 远程访问
    • bind 0.0.0.0
    • protected-mode no
  • 主机设置
    • replicaof 172.17.0.2 6379
  • 主机访问密码
    • masterauth 111111

redis_6379.conf

bind 0.0.0.0
protected-mode no
port 6379
pidfile /var/run/redis6379.pid
logfile "/data/6379.log"
dbfilename dump6379.rdb
dir /data
masterauth 111111
requirepass 111111
appendonly yes
appendfilename "appendonly.aof"
appenddirname "appendonlydir"

redis_6380.conf

bind 0.0.0.0
protected-mode no
port 6379
pidfile /var/run/redis6380.pid
logfile "/data/6380.log"
dbfilename dump6380.rdb
dir /data
replicaof 172.17.0.2 6379
masterauth 111111
requirepass 111111
appendonly yes
appendfilename "appendonly.aof"
appenddirname "appendonlydir"

redis_6381.conf

bind 0.0.0.0
protected-mode no
port 6379
pidfile /var/run/redis6381pid
logfile "/data/6381.log"
dbfilename dump6381.rdb
dir /data
replicaof 172.17.0.2 6379
masterauth 111111
requirepass 111111
appendonly yes
appendfilename "appendonly.aof"
appenddirname "appendonlydir"

2.2、启动

docker run --name redis79  \
-v /usr/local/redis7.2.4/6379/data:/data  \
-v /usr/local/redis7.2.4/6379/conf:/usr/local/etc/redis \
-p 6379:6379 -d 9b38108e295d \
redis-server /usr/local/etc/redis/redis6379.conf --port 6379

docker run --name redis80  \
-v /usr/local/redis7.2.4/6380/data:/data  \
-v /usr/local/redis7.2.4/6380/conf:/usr/local/etc/redis \
-p 6380:6380 -d 9b38108e295d \
redis-server /usr/local/etc/redis/redis6380.conf --port 6380

docker run --name redis81  \
-v /usr/local/redis7.2.4/6381/data:/data  \
-v /usr/local/redis7.2.4/6381/conf:/usr/local/etc/redis \
-p 6381:6381 -d 9b38108e295d \
redis-server /usr/local/etc/redis/redis6381.conf --port 6381

在这里插入图片描述

查看主从信息 info replication
在这里插入图片描述

主从关键点演示

从机不可以执行写命令

在这里插入图片描述

从机从头开始复制

先下线6381（此时master未插入数据），之后master执行set，再上线6381，6381复制master全量数据

在这里插入图片描述

主机下线后，主从关系不会变化

可以看到 redis79下线再上线，主从关系没有变化，只是从机的 master_link_status up down转换
在这里插入图片描述

2.3、主从复制工作流程

  1. 建立连接
    • 节点发送slaveof命令与主节点建立连接
  2. 数据同步
    • 主节点会执行bgsave命令生成RDB快照文件，并将其发送给从节点
    • 全量复制=>在节点初始化时，将主节点的数据一次性同步到从节点
    • 增量复制=>同步自上次同步之后发生变更的数据(从机重启之后增量复制，具体是记录一个偏移量)
  3. 命令传播
    • 同步完成后，进入命令传播阶段，在此阶段，主节点将持续向从节点发送写命令

3、Redis哨兵

由于主从复制在master挂了之后，不会自动选取新的master，故引入哨兵。哨兵监控master和slave，当master挂了之后，在slave中选出新master

sentinel.conf

3.1、准备配置

查看 master 容器 IP，用于后面设置 master IP
在这里插入图片描述

sentinel26379.conf

protected-mode no
port 26379
daemonize yes
pidfile /var/run/redis-sentinel26379.pid
logfile "/data/sentinel26379.log"
dir /data
sentinel monitor mymaster 172.17.0.2 6379 2
sentinel auth-pass mymaster 111111

sentinel26380.conf

protected-mode no
port 26380
daemonize yes
pidfile /var/run/redis-sentinel26380.pid
logfile "/data/sentinel26380.log"
dir /data
sentinel monitor mymaster 172.17.0.2 6379 2
sentinel auth-pass mymaster 111111

sentinel26381.conf

protected-mode no
port 26381
daemonize yes
pidfile /var/run/redis-sentinel26381.pid
logfile "/data/sentinel26381.log"
dir /data
sentinel monitor mymaster 172.17.0.2 6379 2
sentinel auth-pass mymaster 111111

3.2、启动Redis

docker run --name redis6379  \
-v /usr/local/redis7.2.4/6379/data:/data  \
-v /usr/local/redis7.2.4/6379/conf:/usr/local/etc/redis \
-p 6379:6379 -d 9b38108e295d \
redis-server /usr/local/etc/redis/redis_6379.conf --port 6379

3.3、启动哨兵

docker run --name redis-sentinel26379 \
-v /usr/local/redis7.2.4/6379/conf/sentinel26379.conf:/usr/local/etc/redis/sentinel.conf \
-d 9b38108e295d

docker exec -it redis-sentinel26379 /bin/bash

redis-sentinel /usr/local/etc/redis/sentinel.conf

3.4、效果

所有启动的容器展示

在这里插入图片描述

搭建完成后主从关系

在这里插入图片描述

下线 6379 主机之后再上线主从关系

选举新的master，旧主变为slave

在这里插入图片描述

3.4、哨兵运行流程和选举原理

1、哨兵集群监控 master

2、sdown : sentinel 发送心跳包，一定时间没有收到master的回复，就认为主观下线

3、odown : 当有 quorum 个 sentinel 认为主观下线，就认为 master 客观下线

4、选出哨兵 leader （RAFT算法）

5、哨兵 leader 选出新master slaveof on one

  • 比较优先级 repliica-priority (优先级数值小的)
  • 比较复制偏移量 offset （偏移量大的）
  • 比较 run id （run id 小的）

6、leader 让其他 slave 认新master

7、leader 让老master 降级，成为新 master 的 slave

3.5、哨兵使用建议

1、使用哨兵集群，保证高可用

2、哨兵节点的数量应该为奇数

3、哨兵集群 + 主从复制，不能保证数据零丢失

4、Redis集群

Redis 集群 = 数据分片 + 高可用性。在这种模式下，数据被分散存储在多个节点上，每个节点只保存部分数据。这提高了系统的可扩展性和性能。通过一致性哈希，集群能够实现自动的数据分片，同时通过节点间的通信保持数据的同步和状态的一致。

Redis 哨兵 = 主从复制 + 故障转移。当主节点发生故障时，哨兵节点会自动将从节点升级为新的主节点，并通知其他从节点和客户端更新配置。这种模式的优势在于其自动化的故障恢复机制，提高了系统的可用性，并且配置简单。

业务需要处理大量数据并且要求高性能，集群模式更合适

业务对数据量的要求不高，但希望建立一个简单且具有高可用性的缓存系统，哨兵模式更合适

4.1、槽映射实现方法和对比

在这里插入图片描述

4.2、集群搭建

配置基本相同，改下端口和文件名

bind 0.0.0.0
protected-mode no
port 7301
logfile "/data/cluster7301.log"
pidfile /data/cluster7301.pid
dir /data
dbfilename dump7301.rdb
appendonly yes
appendfilename "appendonly7301.aof"
requirepass 111111
masterauth 111111cluster-enabled yes
cluster-config-file nodes-7301.conf
cluster-node-timeout 5000

启动六个实例

docker run --name redis7301  \
-v /usr/local/redis7.2.4/cluster/data:/data  \
-v /usr/local/redis7.2.4/cluster/conf/redis-cluster-7301.conf:/usr/local/etc/redis/redis.conf \
-p 7301:7301 -d 9b38108e295d \
redis-server /usr/local/etc/redis/redis.conf --port 7301

docker run --name redis7306  \
-v /usr/local/redis7.2.4/cluster/data:/data  \
-v /usr/local/redis7.2.4/cluster/conf/redis-cluster-7306.conf:/usr/local/etc/redis/redis.conf \
-p 7306:7306 -d 9b38108e295d \
redis-server /usr/local/etc/redis/redis.conf --port 7306

启动容器并查看IP

docker inspect -f='{{.Name}} {{.NetworkSettings.IPAddress}}' $(docker ps -aq)

在这里插入图片描述

构建主从关系

进入容器 redis 7301

docker exec -it redis7301 /bin/bash

将六个节点加入到集群，一主一从

redis-cli -p 7301 -a 111111 --cluster create --cluster-replicas 1 \
172.17.0.7:7306 \
172.17.0.6:7305 \
172.17.0.5:7304 \
172.17.0.4:7303 \
172.17.0.3:7302 \
172.17.0.2:7301

在这里插入图片描述

查看集群和节点状态

在这里插入图片描述

操作集群

集群需要路由到位 ，即命令中添加 -c

在这里插入图片描述

查看key属于哪个槽

cluster keyslot key

在这里插入图片描述

4.3、主从切换（演示）

在这里插入图片描述

在这里插入图片描述

4.4、故障转移（演示）

redis7306 重新上线后，主从关系变了，为了改回初始的主从关系，登录到原来的主机使用 cluster failover

在这里插入图片描述

4.5、扩容（演示）

docker run --name redis7307  \
-v /usr/local/redis7.2.4/cluster/data:/data  \
-v /usr/local/redis7.2.4/cluster/conf/redis-cluster-7307.conf:/usr/local/etc/redis/redis.conf \
-p 7307:7307 -d 9b38108e295d \
redis-server /usr/local/etc/redis/redis.conf --port 7307

docker run --name redis7308  \
-v /usr/local/redis7.2.4/cluster/data:/data  \
-v /usr/local/redis7.2.4/cluster/conf/redis-cluster-7308.conf:/usr/local/etc/redis/redis.conf \
-p 7308:7308 -d 9b38108e295d \
redis-server /usr/local/etc/redis/redis.conf --port 7308

redis-cli -a 111111 -p 7301  --cluster add-node \
172.17.0.8:7307 \
172.17.0.2:7301

redis-cli -a 111111 -p 7301 --cluster add-node 要加入的节点信息【IP:PORT】 集群中任一节点信息【IP:PORT】

在这里插入图片描述

查看集群状态（新节点未分配槽位）

redis-cli -a 111111 -p 7301 --cluster check 【IP:PORT】 集群中的任一节点都能得到信息

重新分配槽位

在这里插入图片描述
在这里插入图片描述

分配从节点

redis-cli -a 密码 --cluster add-node ip:新slave端口 ip:新master端口 --cluster-slave --cluster-master-id 新主机节点ID

redis-cli -a 111111 -p 7301 --cluster add-node \
172.17.0.9:7308 \
172.17.0.8:7307 \
--cluster-slave --cluster-master-id 4a849f4b3d5e9e6bbf4412e8c86e7904477f4d4b

在这里插入图片描述

在这里插入图片描述

4.6、缩容（演示）

删除从节点7308

命令：redis-cli -a 密码 --cluster del-node ip:端口 节点ID

redis-cli -a 111111 -p 7301 --cluster del-node 172.17.0.9:7308 14cca2509252d583b06d3fe521eed8661f7efc15

将主节点7307的槽位重新分配给其他主节点

redis-cli -a 111111 --cluster reshard 172.17.0.2:7301

在这里插入图片描述

槽位重新分配，7307也变为从节点

在这里插入图片描述

删除原主节点7307

redis-cli -a 111111 -p 7301 --cluster del-node 172.17.0.8:7307 4a849f4b3d5e9e6bbf4412e8c86e7904477f4d4b

在这里插入图片描述

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.rhkb.cn/news/359427.html

如若内容造成侵权/违法违规/事实不符，请联系长河编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

从广州到上海|荣载光的智慧 与SSHT共同探索智能照明更多想象空间

从广州到上海|荣载光的智慧 与SSHT共同探索智能照明更多想象空间

随着生活水平的提高，大众对高品质生活的追求脚步逐步加快，人们对智能照明的需求日益多样化，不再仅仅满足于传统的照明功能，而是转向智能照明系统，提出更高的需求。 展望未来，中国智能照明市场预计将迎来全…
阅读更多...
泽众云真机-平台即将升级支持华为机型HarmonyOS NEXT系统

泽众云真机-平台即将升级支持华为机型HarmonyOS NEXT系统

具小编了解，泽众云真机即将升级支持华为机型HarmonyOS NEXT系统。有些人可能对HarmonyOS NEXT系统了解不多。 之前我们有个银行项目，客户要求测试华为HarmonyOS NEXT系统环境，当时我们云真机尚未有该系统的机型，然后技术人员向华为…
阅读更多...
SpringBoot + Vue 实现 AES 加密和 AES 工具类总结

SpringBoot + Vue 实现 AES 加密和 AES 工具类总结

目录 一、加密知识回顾 AES加密模式 二、Java 自定义 AES 工具类 三、SpringBoot 实现 AES 加密登陆 controller 层 server 层 四、Vue 实现 AES 加密登陆 五、前端AES工具类 六、实现结果 一、加密知识回顾 密钥是AES算法实现加密和解密的根本。对称加密算法之所以…
阅读更多...
最新SCI算法：常青藤优化算法（IVY）原理及应用 Python代码

最新SCI算法：常青藤优化算法（IVY）原理及应用 Python代码

声明：文章是从本人公众号中复制而来，因此，想最新最快了解各类算法的家人，可关注我的VX公众号：python算法小当家，不定期会有很多免费代码分享~ 最新SCI算法：常青藤优化算法（IVY&…
阅读更多...
浏览器提升编译速度小技巧（一）- 防病毒排除

浏览器提升编译速度小技巧（一）- 防病毒排除

1.引言 在Chrome开发过程中，编译速度是影响开发效率的关键因素之一。编译一个大型项目如Chrome，往往需要处理大量的代码文件和依赖库，这个过程既复杂又耗时。因此，任何能够提升编译速度的技巧，都能显著提高开发效率&a…
阅读更多...
如何使用Python和PaddleOCR轻松识别图片中的文字

如何使用Python和PaddleOCR轻松识别图片中的文字

在这个数字化时代，文本识别技术变得越来越重要，它广泛应用于文档自动化处理、内容审核、智能交互等场景。本文将引导你如何使用Python结合PaddleOCR库，轻松实现图片中的文字识别功能。 必备工具包安装 在开始编写代码之前，你需要…
阅读更多...
Cephalo：专门用于仿生设计的多模态视觉大型语言模型

Cephalo：专门用于仿生设计的多模态视觉大型语言模型

实时了解业内动态，论文是最好的桥梁，专栏精选论文重点解读热点论文，围绕着行业实践和工程量产。若在某个环节出现卡点，可以回到大模型必备腔调或者LLM背后的基础模型重新阅读。而最新科技（Mamba,xLSTM,KAN）…
阅读更多...
什么是响应式编程

什么是响应式编程

我们知道，当系统面对大流量、高并发的访问请求时，就可能会出现一系列性能问题，导致服务丧失了即时的响应性。如何时刻确保系统具有应对请求压力的能力，是架构设计的核心问题之一。 经典的服务隔离、限流、降级以及熔断等机制能够在…
阅读更多...
2024全国各地高考录取分数线一览表（含一本、二本、专科）

2024全国各地高考录取分数线一览表（含一本、二本、专科）

2024年高考录取分数线陆续公布，上大学网(www.sdaxue.com)为大家整理全国31个省市高考录取分数线汇总，包括本科批、专科批和特殊类招生控制分数线汇总，来看看你的省份多少分能上大学吧。 一、2024年全国高考录取线一览表 1、宁夏 一本线&…
阅读更多...
一文搞懂Linux命令行下载OneDrive分享文件

一文搞懂Linux命令行下载OneDrive分享文件

一文搞懂Linux命令行下载OneDrive分享文件 什么问题？ 因为OneDrive有些坑，无法从分享界面获取真实下载链接，比如下面这个链接： https://connecthkuhk-my.sharepoint.com/:f:/g/personal/jhyang13_connect_hku_hk/EsEgHtGOWbJIm…
阅读更多...
Golang逃逸分析

Golang逃逸分析

在Go语言中，逃逸分析(Escape Analysis)是一种编译器优化技术，用于确定变量是应该分配在堆上还是在栈上。这对程序的性能有显著的影响，因为栈上资源的分配速度和释放速度要比堆上快得多，同时堆上的内存管理也更加简单。 基本概念 …
阅读更多...
C++并发之协程实例(四)(通过迭代器访问生成器序列)

C++并发之协程实例(四)(通过迭代器访问生成器序列)

目录 1 协程2 实例3 运行 1 协程 协程(Coroutines)是一个可以挂起执行以便稍后恢复的函数。协程是无堆栈的：它们通过返回到调用方来暂停执行，并且恢复执行所需的数据与堆栈分开存储。这允许异步执行的顺序代码（例如，在没有显式回调…
阅读更多...
零代码搭建AI应用-文心智能体的设计与实现

零代码搭建AI应用-文心智能体的设计与实现

本教程旨在帮助你开发一个结合语音识别和信息查询技术的智能应用，为用户提供登山小技巧和心得体会，满足用户在户外运动中的需求。通过设计不同角色和场景，可以满足用户在不同生活领域的需求，例如在家庭、社交、职场等场景下提供不…
阅读更多...
什么洗地机值得推荐？洗地机选购攻略，热门洗地机推荐

什么洗地机值得推荐？洗地机选购攻略，热门洗地机推荐

在家庭清洁领域，洗地机已成为越来越多家庭的首选设备。它不仅能轻松应对各种材质的地面，还能有效去除顽固污渍，使家居环境更加整洁。然而，面对市场上众多洗地机品牌，许多消费者都会产生“什么洗地机值得推荐”的疑问。…
阅读更多...
算法常见手写代码

算法常见手写代码

1.NMS def py_cpu_nms(dets, thresh):"""Pure Python NMS baseline."""#x1、y1、x2、y2、以及score赋值x1 dets[:, 0]y1 dets[:, 1]x2 dets[:, 2]y2 dets[:, 3]scores dets[:, 4]#每一个检测框的面积areas (x2 - x1 1) * (y2 - y1 1)#按…
阅读更多...
2024年数据、自动化与智能计算国际学术会议（ICDAIC 2024）

2024年数据、自动化与智能计算国际学术会议（ICDAIC 2024）

全称：2024年数据、自动化与智能计算国际学术会议（ICDAIC 2024） 会议网址:http://www.icdaic.com 会议地点: 厦门 投稿邮箱：icdaicsub-conf.com投稿标题：ArticleTEL。投稿时请在邮件正文备注：学生投稿&#…
阅读更多...
Linux安装minio及mc客户端(包含ARM处理器架构)

Linux安装minio及mc客户端(包含ARM处理器架构)

🍓 简介：java系列技术分享(👉持续更新中…🔥) 🍓 初衷:一起学习、一起进步、坚持不懈 🍓 如果文章内容有误与您的想法不一致,欢迎大家在评论区指正🙏 🍓 希望这篇文章对你有所帮助,欢…
阅读更多...
Ubuntu 18.04 安装低延时内核

Ubuntu 18.04 安装低延时内核

下面记录在在Ubuntu 18.04系统下安装低延时内核的流程： Ubuntu 内核信息 ll /boot其中initrd.img为根文件系统，System.map为内核符号表（将内核代码段中的地址映射到对应的函数名或者全局变量名），vmlinuz为内核镜像。…
阅读更多...
论文翻译 | Active Retrieval Augmented Generation 主动检索增强生成

论文翻译 | Active Retrieval Augmented Generation 主动检索增强生成

Zhengbao Jiang1∗ Frank F. Xu1∗ Luyu Gao1∗ Zhiqing Sun1∗ Qian Liu2 Jane Dwivedi-Yu3 Yiming Yang1 Jamie Callan1 Graham Neubig1 卡内基梅隆大学语言技术研究所；海洋人工智能研究室；FAIR, Meta EMNLP 2023 main （Proceedings of t…
阅读更多...
低成本创业新篇章：上门回收小程序的崛起与挑战

低成本创业新篇章：上门回收小程序的崛起与挑战

在当今这个快速变化的时代，低成本创业项目成为了许多创业者的首选。其中，上门回收小程序以其独特的商业模式和市场需求，成为了创业市场中的一股新势力。本文将深入探讨上门回收小程序作为低成本创业项目的崛起之路以及面临的挑战。 一、上门回…
阅读更多...
最新文章
推荐文章

Copyright @ 2022~2023