“深入探讨Redis主从复制:原理、配置与优化“

目录

# 概念

1. 配置主从同步步骤

1.1 创建文件夹

1.2 复制配置文件

1.3 配置文件关闭

1.4 查看端口号,发现端口号存在

1.5 连接三个端口号

1.6 查看主机运行情况

1.7 让服务器变成(主机)或(从机)

1.8 实现效果

2. 主从复制(一主二仆)的特点

2.1 从服务器挂掉重启后并没有变成从机而是成为了主机

2.2 主从复制原理

2.3 薪火相传和反客为主

3. 哨兵模式(sentinel)

3.1 创建哨兵文件

3.2 配置哨兵

3.3 启动哨兵

4. 主从复制概念流程

4.1 主从复制的基本概念

4.2 主从复制的工作流程

4.3 主从复制的示例配置

4.4 参考示意图

5. 主从复制的优缺点

6. 主从复制的应用场景


# 概念

  • 概念

    主机数据更新后根据配置和策略,自动同步到备机的master/slaver机制,Master以写为主,Slave以读为主;

    实现:读写分离;性能扩展;容灾快速恢复;

  1. 主从复制:主机挂掉,从机不上位
    • 这种情况通常说明缺少故障转移机制。仅靠 Redis 主从复制,不会自动进行主从切换。在没有哨兵或其他协调机制的情况下如果主机(主节点)挂掉,从机(从节点)不会自动升级为主节点
  2. 从机挂掉重启后的行为
    • 如果 Redis 的从节点挂掉并重启,它会尝试重新连接到当前的主节点。如果主节点仍然是原来的主节点从节点会继续作为从节点。如果原主节点已挂掉且有故障转移机制(如 Redis Sentinel)新的主节点会替代旧主节点从节点重启时会连接到新的主节点并同步数据
    • 从节点(Slave)在挂掉后重启,不会自动变成主节点(Master)。它会继续作为从节点存在,并尝试重新连接并同步主节点的数据。这个行为在 Redis 主从复制和哨兵模式下均为默认行为。
  3. 哨兵模式
    • Redis Sentinel 监控主节点和从节点的状态。哨兵集群可以自动检测主节点的故障,并通过投票机制选举一个从节点作为新的主节点。同时,它们会通知其他从节点和客户端关于新主节点的信息。这实现了自动化的主从切换(即故障转移)。

1. 配置主从同步步骤

1.1 创建文件夹

1.2 复制配置文件

在三个文件中写入内容

直接复制并修改配置文件中的6379分别为6379、6380、6381(三个地方的值都修改)

1.3 配置文件关闭

1.4 查看端口号,发现端口号存在

1.5 连接三个端口号

(三个连接都是同样操作)

通过端口号连接上服务器:redis-cli -p 6379、redis-cli -p 6380 、redis-cli -p 6381

连接成功:

1.6 查看主机运行情况

查看三台主机运行情况(没有设置都是主机,没有从机);

此时我们并没有配置谁是从服务器,都是主服务器,所以需要配置一下;

info replication :打印主从复制的相关信息;

可以看到当前的6379服务是一个主机master;

1.7 让服务器变成(主机)或(从机)

使用命令使6380和6381变成从机;

成为某个实例的从服务器:slaveof <ip> <port>

在6380和6381上都执行:slaveof 127.0.0.1 6379

成功后查看 6381 变成了slave从机:

在6379服务中查看,它是master主机:

实现一主二从:

  • 此操作完成后,他们就变成了主从关系,主机通过写入时同时主机也会把数据复制到从机中,读取的时候读的是从机的信息。(主机只用写,从机只用读)
  • (一主两从)代表的是主机可以写入数据的同时把数据也复制一份到他下面的从机中(从机可以有多个),从机也可以查到主机写入的值

1.8 实现效果

主机写入:

从机读取:

2. 主从复制(一主二仆)的特点

2.1 从服务器挂掉重启后并没有变成从机而是成为了主机

  • 从服务器在重启后有可能会成为主服务器的情况:
    • 哨兵(Sentinel)故障转移:当主服务器(Master)宕机时,Redis Sentinel 进行故障转移(Failover),选举一个从服务器(Slave)为新的主服务器。如果该从服务器重新启动,可能会继续作为新的主服务器,尤其是在它已经被选为主服务器之前。
    • 没有正确配置从服务器:如果从服务器重启后没有正确配置为从服务器(Replica),或者在重启时无法连接到指定的主服务器,它可能会以独立的主服务器启动。

特点一:

如果又继续把他变成6379的从服务器,那么他会把他挂掉之前的数据全部一个个的复制过来。

所以当他又变成从服务器的时候,他又会有了主机复制的数据;

特点二:

当主服务器挂掉的时候,从服务器并不会上位,还是原来的从服务器;

2.2 主从复制原理

  1. 当从连接上主服务器之后,从服务器向主服务发送进行数据同步消息;
  2. 主服务器接到从服务器发送过来同步消息,把主服务器数据进行持久化rdb文件,把rdb文件发送从服务器,从服务器拿到rdb进行读取;
  3. 每次主服务器进行写操作之后,和从服务器进行数据同步;
    • 不过从服务器只会在第一次连接主服务器的时候发起同步消息,当连接后,都是主服务器主动发起请求给从服务器,进行复制同步rbd数据;

2.3 薪火相传和反客为主

1. 薪火相传概念及缺点:

缺点:当从服务器挂掉之后,主服务器无法直接连接从机下的从机;

类似管理层职位划分,当人的数量变多了,这会变得不好管理,这时就会分出小组长去管理其他人,以此类推;

2. 反客为主:

当一个master宕机后,后面的slave可以立刻升为master,其后面的slave不用做任何修改;

slaveof no one :将从机变为主机;

  • 场景:

    当发布上线的服务器挂掉之后,我们程序员需要手动的去操作,执行命令,这个也需要一段时间;

  • 缺点:

    手动操作;

    耗时;

3. 哨兵模式(sentinel)

  • (哨兵模式与主从复制关联:当配置了哨兵之后,那么当主服务器挂掉之后,哨兵立马顶上,且哨兵也可以配置多个)

  • 概念

    反客为主的自动版,能够后台监控主机是否故障,如果故障了根据投票数自动将从库转换为主库;

3.1 创建哨兵文件

myredis是创建服务器的时候,自己创建的一个文件,里面放的是redis配置文件;

进入myredis文件,创建sentinel.conf;

3.2 配置哨兵

  • 在哨兵文件中写入sentinel monitor mymaster 127.0.0.1 6379 1
  • 其中mymaster为监控对象起的服务器名称,1为至少有多少个哨兵同意迁移的数据;
  • 1数量代表有1个哨兵同意切换,为2就是有两个哨兵同意切换才能切换。

我如何知道哨兵有几个同意我迁移的?

        在Redis的哨兵模式中,当主节点出现故障时,哨兵会选举一个新的主节点并进行迁移。在迁移过程中,哨兵需要确保有足够的从节点同意迁移才能进行。

在默认情况下,哨兵模式中至少需要有一半以上的从节点同意迁移才能进行。这个比例可以通过配置文件中的quorum参数进行设置,默认值为2(即至少需要2个从节点同意迁移)。

如果你想要知道当前哨兵模式中有多少个从节点同意迁移,可以使用Redis的命令SENTINEL sentinels <master-name>来获取哨兵的信息。其中<master-name>是主节点的名称。

命令的返回结果中会包含一个num-slaves字段,表示有多少个从节点,以及一个num-other-sentinels字段,表示有多少个其他哨兵节点。通过计算num-slavesnum-other-sentinels的和,再与quorum进行比较,就可以知道有多少个从节点同意迁移。

3.3 启动哨兵

  • 当我们的主机挂掉之后,这时候从机就可以自动上位了,这时候之前的主机,就变成了当前主机的从机了;(老主机就变成了新上位主机的从机了)
  • 其它从机也隶属于当前新主机了;
  • redis-sentinel sentinel.conf :Sentinel 的启动与使用;

  • 作用:

    高可用性:在 Redis 主节点失效时,自动将一个从节点提升为新的主节点,确保服务可用性。

    监控:监控 Redis 主从结构的健康状态,并在问题发生时通知管理员。

    自动修复:执行自动故障转移和配置修复,减少手动干预。

从机的优先级:

        在 Redis Sentinel 进行故障转移时,从机(slave,或 replica)的优先级影响它们被提升为主机(master)的顺序。Redis 使用一个叫做replica-priority的参数来决定哪个从机有更高的优先级。了解和配置这个优先级参数可以帮助控制从机在故障转移中的选择顺序......

4. 主从复制概念流程

        Redis 主从复制(Master-Slave Replication)是 Redis 用于实现数据分发和高可用性的核心机制。它允许一个 Redis 实例(主机,Master)自动将数据复制到一个或多个 Redis 实例(从机,Slave),从而实现读写分离和数据冗余。下面是主从复制的概念和流程的详细说明。

4.1 主从复制的基本概念

  1. 主机(Master):
    • 处理所有的写请求和修改数据的操作。
    • 将数据变更传播给从机。
  2. 从机(Slave):
    • 从主机同步数据。
    • 通常处理只读请求,减轻主机的负载。
    • 可以被配置为其他从机的主机,形成级联复制。
  3. 全量复制:
    • 从机第一次连接主机或与主机数据差异过大时进行。
    • 发送整个数据快照(RDB 文件)给从机。
  4. 部分复制:
    • 用于同步期间的增量数据变化。
    • 通过复制流(replication stream)将新命令发送给从机。

4.2 主从复制的工作流程

  1. 配置从机:

    • 在从机的配置文件 redis.conf 中指定主机的 IP 和端口,或者使用 SLAVEOF 命令动态配置。
    • 配置文件方式
      replicaof 192.168.1.1 6379

    • 命令方式:
      redis-cli SLAVEOF 192.168.1.1 6379

  2. 初次同步(全量复制):

    • 从机连接主机,发送 PSYNC 命令。
    • 如果是第一次同步或主从数据差异过大,主机生成 RDB 快照。
    • 主机将 RDB 文件发送给从机。
    • 从机载入 RDB 文件以获得主机的完整数据快照。
  3. 增量复制(部分复制):

    • 主机发送从 PSYNC 开始以来的所有写操作命令(即复制流)给从机。
    • 从机将这些命令应用到本地数据中,保持与主机数据一致。
  4. 复制流和心跳机制:

    • 主机持续向从机发送命令流保持数据同步。
    • 主机和从机之间定期发送 PING/PONG 命令确保连接健康。
  5. 故障恢复:

    • 如果从机断开连接,在重新连接后会尝试部分同步,尽量恢复增量数据。
    • 如果部分同步失败(例如,主机的复制缓冲区数据丢失),将重新进行全量同步。

4.3 主从复制的示例配置

主机配置(master.conf):

port 6379
# 其他主机配置

从机配置(slave.conf):

port 6380
replicaof 127.0.0.1 6379

4.4 参考示意图

基本架构图:

5. 主从复制的优缺点

优点:

  • 读写分离: 减轻主机负载,提高读性能。
  • 数据冗余: 提高数据的可靠性。
  • 扩展性: 通过增加从机进行水平扩展。

缺点:

  • 一致性问题: 复制过程中存在延迟,可能导致短暂的不一致。
  • 故障处理: 如果主机故障,需要手动或借助 Sentinel 执行故障转移。
  • 复制延迟: 由于所有的写操作都是先在 Master 上操作,然后同步更新到 slave 上,所以从 Master同步到 slave机器有一定的延迟,当系统很繁忙的时候,延迟问题会更加严重,slave机器数量的增加也会使这个问题更加严重。

6. 主从复制的应用场景

  • 分布式缓存: 在大型分布式系统中,通过增加从机来处理高并发读请求。
  • 数据备份: 通过从机进行数据异地备份,提高数据可靠性。
  • 读写分离架构: 实现读写分离,提高系统整体性能和可用性。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/352227.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

CSS选择符和可继承属性

属性选择符&#xff1a; 示例&#xff1a;a[target"_blank"] { text-decoration: none; }&#xff08;选择所有target"_blank"的<a>元素&#xff09; /* 选择所有具有class属性的h1元素 */ h1[class] { color: silver; } /* 选择所有具有hre…

志愿服务管理系统的设计

管理员账户功能包括&#xff1a;系统首页&#xff0c;个人中心&#xff0c;管理员管理&#xff0c;基础数据管理&#xff0c;广场论坛管理&#xff0c;志愿活动管理&#xff0c;活动报名管理 前台账户功能包括&#xff1a;系统首页&#xff0c;个人中心&#xff0c;志愿活动&a…

单片机(STM32)与上位机传输浮点数

目录 单片机(STM32)与上位机传输数据的方法1. 传输整形数据2. 传输浮点数据3. 如何打包与解包 单片机(STM32)与上位机传输数据的方法 在进行单片机程序的开发时&#xff0c;常常需要与其他设备进行通信。一种情况是与其他电路板通信&#xff0c;比如STM32主机与STM32从机通信&…

YOLOv10项目-服务器上运行

1、前言 2、运行YOLOv10代码流程&#xff08;超详细&#xff09; &#xff08;3&#xff09;根据下面步骤安装&#xff1a; &#xff08;4&#xff09;数据集和其他配置 &#xff08;5&#xff09;测试训练&#xff08;很详细&#xff09; 1、前言 由于一些事情&#xff0…

2024中国应急(消防)品牌巡展成都站成功召开!

汇聚品牌力量&#xff0c;共同相聚成都。6月14日&#xff0c;由中国安全产业协会指导&#xff0c;中国安全产业协会应急创新分会、应急救援产业网联合主办&#xff0c;四川省消防协会协办的“一切为了安全”2024年中国应急(消防)品牌巡展-成都站成功举办。该巡展旨在展示中国应…

英特尔 “AI” 科通:英特尔AI大模型应用前瞻

亲爱的科技探险家、前沿探索者、对未来深具好奇心的您&#xff0c; 身处人工智能引领的时代&#xff0c;我们目睹着行业的革命性变革。技术的创新不仅改变着我们的日常&#xff0c;更重新定义着我们对未来的期许。今天&#xff0c;怀着无限激情和期待&#xff0c;我们邀请您参…

MySQL之优化服务器设置和复制(一)

优化服务器设置 操作系统状态 CPU密集型的机器 CPU密集型服务器的vmstat输出通常在us列会有一个很高的值&#xff0c;报告了花费在非内核代码上的CPU时钟;也可能在sy列有很高的值&#xff0c;表示系统CPU利用率&#xff0c;超过20%就足以令人不安了。在大部分情况下&#xff…

Web应用安全测试-防护功能缺失

Web应用安全测试-防护功能缺失 1、Cookie属性问题 漏洞描述&#xff1a; Cookie属性缺乏相关的安全属性&#xff0c;如Secure属性、HttpOnly属性、Domain属性、Path属性、Expires属性等。 测试方法&#xff1a; 通过用web扫描工具进行对网站的扫描&#xff0c;如果存在相关…

【自动驾驶】ROS小车系统介绍

文章目录 小车组成轮式运动底盘的组成轮式运动底盘的分类轮式机器人的控制方式感知传感器ROS决策主控ROS介绍ROS的坐标系ROS的单位机器人电气连接变压模块运动底盘的电气连接ROS主控与传感器的电气连接运动底盘基本组成电池电机控制器与驱动器控制器与运动底盘状态数据&#xf…

一行代码实现鼠标横向滚动

&#x1f9d1;‍&#x1f4bb; 写在开头 点赞 收藏 学会&#x1f923;&#x1f923;&#x1f923; 在项目中我们可能会遇到当鼠标在某个区域内&#xff0c;我们希望滚动鼠标里面的内容可以横向滚动&#xff1b; 比如我们一些常见的后台状态栏&#xff1a; 那这种该怎么写&…

找工作小项目:day16-重构核心库、使用智能指针(2)

day16-重构核心库、使用智能指针 太多了分一篇写。 5、EventLoop 这是一个事件轮询&#xff0c;在这个部分会通过Poller进行就绪事件的获取&#xff0c;并将事件进行处理。 头文件 这里使用了一个智能指针并使用的是unique_ptr指向Poller红黑树&#xff0c;防止所有权不止…

基于springboot的宠物商城网站

文章目录 项目介绍主要功能截图:部分代码展示设计总结项目获取方式🍅 作者主页:超级无敌暴龙战士塔塔开 🍅 简介:Java领域优质创作者🏆、 简历模板、学习资料、面试题库【关注我,都给你】 🍅文末获取源码联系🍅 项目介绍 基于springboot的宠物商城网站,java项目…

湿法消解石墨消解仪 应用化学分析领域石墨炉

石墨消解仪在化学实验中具有重要的作用。它是一种高级实验设备&#xff0c;广泛应用于化学分析领域&#xff0c;特别是在样品的前处理和测试前的样品制备过程中。 石墨消解仪采用高温高压技术&#xff0c;能够将固体样品中的有机和无机物质转化为可溶性的气体或液体形式。这种…

Ubuntu的文件权限介绍

Linux系统是一个多用户系统&#xff0c;每个用户都会创建自己的文件。为了防止其他人擅自改动他人的文件&#xff0c;需要拥有一套完善的文件保护机制。在Linux系统中&#xff0c;这种保护机制就是文件的访问权限。文件的访问权限决定了谁可以访问和如何访问特定的文件。 为了…

【2024最新华为OD-C/D卷试题汇总】[支持在线评测] 字符串筛选排序(100分) - 三语言AC题解(Python/Java/Cpp)

&#x1f36d; 大家好这里是清隆学长 &#xff0c;一枚热爱算法的程序员 ✨ 本系列打算持续跟新华为OD-C/D卷的三语言AC题解 &#x1f4bb; ACM银牌&#x1f948;| 多次AK大厂笔试 &#xff5c; 编程一对一辅导 &#x1f44f; 感谢大家的订阅➕ 和 喜欢&#x1f497; &#x1f…

比特币的共识协议

目录 前言 一、铸币交易 1.铸币权 2.铸币交易&#xff08;coinbase tx&#xff09; 3.输入和输出 二、小型的区块链 1.见下图所示 2.哈希指针 3.双花攻击 三、块头块身&#xff0c;全节点轻节点 1.块头(block head) 2.块身 3.全节点full node(fully validating node…

小孟再接盲盒小程序,3天开发完!

大家好&#xff0c;我是程序员小孟。 前面开发了很多的商业的单子&#xff0c;私活联盟的小伙伴慢慢的逐渐搞自己的产品。 前面的话&#xff0c;开发了盲盒小程序&#xff0c;最近又接了一款盲盒小程序。因为前面有开发过&#xff0c;所以我们的成本也少了很多。 盲盒小程序…

【一】【QT开发应用】QT开发环境配置,安装QT应用

下载QT软件 点击网址链接&#xff0c;QT下载网址 下载vsaddin插件 点击网址链接&#xff0c;QT下载网址 根据自己的vs版本下载对应的文件. 安装QT 用命令行打开安装程序 找到直接路径, D:\Software\QT\qt-unified-windows-x86-4.3.0-1-online.exe 利用WindowsPowe…

Docker的基本操作 及 容器与外部机互相通讯(持续更新中)

Docker入门&#xff1a; Docker 入门教程 - 阮一峰的网络日志 (ruanyifeng.com)docker入门&#xff0c;这一篇就够了。-CSDN博客Docker 容器使用 | 菜鸟教程 (runoob.com)Docker自定义网络和运行时指定IP_docker run ip-CSDN博客 基本命令 链接&#xff1a;docker入门&#…

鸿蒙: 基础认证

先贴鸿蒙认证 官网10个类别总结如下 https://developer.huawei.com/consumer/cn/training/dev-cert-detail/101666948302721398 10节课学习完考试 考试 90分合格 3次机会 1个小时 不能切屏 运行hello world hvigorfile.ts是工程级编译构建任务脚本 build-profile.json5是工程…