Redis高可用之持久化、主从复制(附配置实例)

目录

  • 一、Redis高可用
    • 1.1 简介
    • 1.2 高可用策略
  • 二、Redis 持久化
    • 2.1 简介
    • 2.2 redis 的 2 种持久化方式
      • 2.2.1 RDB持久化
      • 2.2.2 AOF持久化
  • 三、Redis主从复制
    • 3.1 什么是主从复制?
    • 3.2 为什么要用主从复制?
    • 3.3 主从复制的特性
    • 3.4 主从复制工作原理
      • 3.4.1 全量复制
      • 3.4.2 增量复制
    • 3.5 Redis主从同步策略
  • 四、搭建Redis主从复制
    • Step1 所有节点服务器安装Redis
    • Step2 Master节点修改 Redis 配置文件
    • Step3 Slave节点修改 Redis 配置文件
    • Step4 主从效果验证

一、Redis高可用

1.1 简介

在web服务器中,高可用是指服务器可以正常访问的时间,衡量的标准是在多长时间内可以提供正常服务(99.9%、99.99%、99.999%等等)。
但是在Redis语境中,高可用的含义似乎要宽泛一些,除了保证提供正常服务(如主从分离、快速容灾技术),还需要考虑数据容量的扩展、数据安全不会丢失等。

1.2 高可用策略

策略概述
持久化持久化是最简单的高可用方法,主要作用是数据备份,即将数据存储在硬盘,保证数据不会因进程退出而丢失。
主从复制主从复制是高可用Redis的基础,主要实现了数据的多机备份,以及对于读操作的负载均衡和简单的故障恢复
哨兵在主从复制的基础上,哨兵实现了自动化的故障恢复。缺陷:写操作无法负载均衡,存储能力受到单机的限制。
集群通过集群,Redis解决了写操作无法负载均衡,以及存储能力受到单机限制的问题,实现了较为完善的高可用方案。

二、Redis 持久化

2.1 简介

Redis是内存数据库,数据都是存储在内存中,为了避免服务器断电等原因导致Redis进程异常退出后数据的永久丢失,需要定期将Redis中的数据以某种形式(数据或命令)从内存保存到硬盘;

当下次Redis重启时,利用持久化文件实现数据恢复

除此之外,为了进行灾难备份,可以将持久化文件拷贝到一个远程位置。

2.2 redis 的 2 种持久化方式

2.2.1 RDB持久化

定时把redis内存中的数据进行快照并压缩保存到硬盘;

RDB持久化保存的文件占用空间小,网络传输快,恢复速度也比AOF快,性能影响比AOF更小;

实时性不如AOF,兼容性较差,持久化期间在fork子进程时会阻塞reids父进程。

2.2.2 AOF持久化

追加的方式将Redis写操作的命令记录到文件中;

实时性比RDB好,支持秒级持久化,兼容性较好;

持久化保存的文件占用磁盘空间更大,恢复速度更慢,性能影响更大,AOF文件重写期间在fork子进程时会阻塞reids父进程;

两者区别可通过 *工作方式、实时性、磁盘占用、恢复速度、兼容性、IO性能影响等方面进行阐述。

三、Redis主从复制

3.1 什么是主从复制?

在这里插入图片描述

Redis主从复制是一种常见的数据复制机制,用于在不同的Redis服务器之间同步数据

在主从复制中,一个Redis服务器充当主服务器(master),负责接收和处理写入操作,而其他的Redis服务器充当从服务器(slave),通过复制主服务器的数据来保持与主服务器的数据同步。

Redis主从复制是实现读写分离、Redis高可用等的基础

3.2 为什么要用主从复制?

1)产生Redis单机故障时,可用通过从服务器上进行恢复数据;

2)Redis要实现高可用、高并发,单个Redis也就只能支持几万的QPS,必须以集群的形式提供服务,而集群中又以多个主从组成。

3)主从是以多个redis集合在一起,以一个master多个slave为模式对外提供服务,master主要以写为主,slave提供读,即是读写分离的情况,以读多写少为准。

3.3 主从复制的特性

1)一个master可以有多个slave;

2)一个slave只能有一个master;

3) 数据流是单向的,master到slave;

4)主从复制底层依赖与RDB方式进行全量复制。

3.4 主从复制工作原理

Redis主从之间的复制分为两部分:全量复制和增量复制。

3.4.1 全量复制

Redis在第一次实现主从关系时会进行全量复制
在这里插入图片描述

1)Slave 通过 psync命令同步数据与Master建立socket长连接;

2)Master 收到psync命令,执行bgsave语句生成RDB快照

3)Master发送RDB数据;

4)Slave清空数据并加载Master发来的RDB数据;

5)Master将生成RDB文件过程中,修改的数据,repl buffer发送给Slave

6)Slave执行接收到的修改命令;

7)Master通过socket长连接持续把写命令发送给从接单,保证数据一致性。

3.4.2 增量复制

如果由于网络原因造成原因造成主从断开,期间有数据写入master,再次形成主从时,会形成增量复制
在这里插入图片描述

1)Slave连接断开

2)Master最近数据的修改命令的缓存;

3)Slave重新建立Socket长连接到master;

4)Slave psync命令同步数据: offset偏移量控制;

5)Master判断 Slave的offset。如果在repl backlog buffer中,Master会将缓存中从salve的offset之后数据一次性同步给salve节点,否则会全量同步;

6)Master通过socket长连接持续把写命令发送给从节点,保证主从一致性

3.5 Redis主从同步策略

主从刚刚连接的时候,进行全量同步;全同步结束后,进行增量同步。

当然,如果有需要,slave 在任何时候都可以发起全量同步。

redis 策略是,无论如何,首先会尝试进行增量同步,如不成功,要求从机进行全量同步

四、搭建Redis主从复制

在这里插入图片描述

节点服务器IP地址
Master192.168.2.100
Slave1192.168.2.102
Slave2192.168.2.103
#开机自动关闭防火墙
systemctl  disable firewalld --now#永久关闭selinux
sed -i 's/enforcing/disabled/' /etc/selinux/config

Step1 所有节点服务器安装Redis

安装过程见 Redis安装部署和常用命令_白幽幽白的博客-CSDN博客

Step2 Master节点修改 Redis 配置文件

vim /usr/local/redis/conf/redis.confbind 0.0.0.0							#87行,修改监听地址为0.0.0.0
protected-mode no						#111行,将本机访问保护模式设置no
port 6379								#138行,Redis默认的监听6379端口
daemonize yes							#309行,设置为守护进程,后台启动
pidfile /usr/local/redis/log/redis_6379.pid		#341行,指定 PID 文件
logfile "/usr/local/redis/log/redis_6379.log"	#354行,指定日志文件
dir /usr/local/redis/data				#504行,指定持久化文件所在目录
#requirepass abc123						#1037行,可选,设置redis密码
appendonly yes							#1380行,开启AOF

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述在这里插入图片描述
在这里插入图片描述

systemctl restart redis-server.service

Step3 Slave节点修改 Redis 配置文件

Slave1

vim /usr/local/redis/conf/redis.confbind 0.0.0.0							
#87行,修改监听地址为0.0.0.0protected-mode no						
#111行,将本机访问保护模式设置noport 6379								
#138行,Redis默认的监听6379端口daemonize yes							
#309行,设置为守护进程,后台启动pidfile /usr/local/redis/log/redis_6379.pid		#341行,指定 PID 文件logfile "/usr/local/redis/log/redis_6379.log"	#354行,指定日志文件dir /usr/local/redis/data				
#504行,指定持久化文件所在目录replicaof 192.168.2.100 6379			
#528行,指定要同步的Master节点IP和端口masterauth abc123						
#535行,可选,指定Master节点的密码,仅在Master节点设置了requirepassrequirepass abc123						
#1038行,可选,设置redis密码appendonly yes							
#1380行,开启AOF

在这里插入图片描述

systemctl restart redis-server.service

Slave2

#远程传输
scp 192.168.2.102:/usr/local/redis/conf/redis.conf /usr/local/redis/conf/redis.confsystemctl restart redis-server.service

在这里插入图片描述

Step4 主从效果验证

#在Master节点上看日志:
tail -f /usr/local/redis/log/redis_6379.log 

在这里插入图片描述

#在Master节点上验证从节点:
redis-cli -a abc123 info replication -a

在这里插入图片描述

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/142757.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

【【萌新的RISCV学习之流水线通路的控制-8】】

萌新的RISCV学习之流水线通路的控制-8 我们在之前学习了整个单周期的模块工作流程 我们按照整体的思路分段 将数据通路划分为5个阶段 IF : 取地址 ID :指令译码和读存储器堆 EX :执行或计算地址 MEM : 数据存储器访问 WB : 写回 单周期数据通路&…

飞书与企业微信的异同

云文档 飞书的云文档会自动用游览器打开,不会直接在PC应用中打开(移动端能在应用中打开)。 飞书云文档能够插入视频、流程图、问卷等等 聊天消息交互 钉钉也有类似的功能,可以针对消息进行点赞等回复 钉钉的消息回复还有【收到…

5.外部中断

中断初始化配置步骤: IO口初始化配置 开启中断总允许EA 打开某个IO口的中断允许 打开IO口的某一位的中断允许 配置该位的中断触发方式 中断函数: #pragma vector PxINT_VECTOR __interrupt void 函数名(void){}#pragma vector PxINT_VECTOR __int…

【pytest】 标记冒烟用例 @pytest.mark.smoke

1. 使用 pytest.mark.smoke 标记用例 import pytest class Test_Smoke:def test_01(self):assert 112pytest.mark.smokedef test_02(self):assert 121pytest.mark.smokedef test_03(self):assert 1 2 3 2.配置文件pytest.ini [pytest] markers smoke 3. 运行指定标签 运…

网络安全复习大纲wcf

单选10判断10填空30简答25分析25 选择 (1)计算机网络安全是指利用计算机网络管理控制和技术措施,保证在网络环境中数据的( )、完整性、网络服务可用性和可审查性受到保护。 A、保密性 B、抗攻击性 C、网络服务管理性 …

Unity之NetCode多人网络游戏联机对战教程(2)--简单实现联机

文章目录 1.添加基本组件2.创建NetworkManager组件3.创建Player4.创建地面5.创建GameManager6.编译运行7. 测试联机后话 1.添加基本组件 NetworkManagerPlayerScene 2.创建NetworkManager组件 创建一个空物体,命名为NetworkManager 选择刚刚创建的NetworkManager…

VS2022 编译protobuf , qt 使用

一、下载源码 protobuf: 同步 https://github.com/protocolbuffers/protobuf (gitee.com) 下载如v3.11.2 版本 二、下载CMake 三、编译 1、在1处选择源码目录下的cmake 目录;在2处选择一处空目录(自己随便建) 2、点击config,选择…

【面试八股】IP协议八股

IP协议八股 子网掩码的作用为什么IP协议需要分片IP协议什么时候需要分片IP协议是怎么进行分片的那么IP协议是如果进行标识属于同一个分片呢?TCP协议和UDP协议将数据交给IP协议之后,是否需要分片传输? 子网掩码的作用 用来标识网络号和主机号…

新媒体运营的未来:ChatGPT的智能助手

💂 个人网站:【工具大全】【游戏大全】【神级源码资源网】🤟 前端学习课程:👉【28个案例趣学前端】【400个JS面试题】💅 寻找学习交流、摸鱼划水的小伙伴,请点击【摸鱼学习交流群】 新媒体运营是数字时代的…

【李沐深度学习笔记】线性回归的从零开始实现

课程地址和说明 线性回归的从零开始实现p3 本系列文章是我学习李沐老师深度学习系列课程的学习笔记,可能会对李沐老师上课没讲到的进行补充。 线性回归的从零开始实现 不使用任何深度学习框架提供的计算功能,只使用PyTorch提供的Tensor来实现线性回归…

合肥对新通过(CMMI)五级、四级、三级认证的软件企业,对新通过信息技术服务标准(ITSS)认证的软件企业,给予最高50万奖励

合肥市加快软件产业发展 推进软件名城创建若干政策实施细则 为贯彻落实《合肥市人民政府办公室关于印发合肥市加快软件产业发展推进软件名城创建若干政策的通知》(合政办〔2023〕9号)文件精神,规范政策资金管理,制定本实施细则。…

linux内网渗透

一、信息收集 主机发现: nmap -sP 192.168.16.0/24 端口探测 masscan -p 1-65535 192.168.16.168 --rate1000 开放端口如下 nmap端口详细信息获取 nmap -sC -p 8888,3306,888,21,80 -A 192.168.16.168 -oA ddd4-port目录扫描 gobuster dir…

同创永益CNBR平台——云原生时代下的系统稳定器

随着各行业数字化的快速发展,企业的业务运作、经营管理越来越依赖于云原生系统的可靠运行。信息系统服务的连续性, 业务数据的完整性、正确性、有效性会直接关系到企业的生产、经营与决策活动。一旦因自然灾害、设备故障或人为因素等引起信息数据丢失和云原生业务处…

TextSniper for Mac: 革新您的文本识别体验

你是否曾经需要从图片或扫描文档中提取文本,却苦于没有合适的工具?那么,TextSniper for Mac将是你的完美解决方案。这款文本识别工具将彻底改变你处理图像和扫描文件的方式,让你更快速、更高效地完成任务。 TextSniper for Mac 是…

Apache Hive安装部署详细图文教程

目录 一、Apache Hive 元数据 1.1 Hive Metadata 1.2 Hive Metastore 二、Metastore 三种配置方式 ​2.1 内嵌模式 ​2.2 本地模式 ​2.3 远程模式 ​三、Hive 部署实战 3.1 安装前准备 3.2 Hadoop 与 Hive 整合 3.3 远程模式安装 3.3.1 安装 MySQL 3.3.2 …

基于Matlab求解2023华为杯研究生数学建模竞赛E题——出血性脑卒中临床智能诊疗建模实现步骤(附上源码+数据)

文章目录,源码见文末下载 背景介绍准备工作:处理数据第一题:血肿扩张风险相关因素探索建模a)问题b)问题 第二题: 血肿周围水肿的发生及进展建模,并探索治疗干预和水肿进展的关联关系a&#xff0…

【yolox训练过程中遇到的问题集合】

这里写目录标题 深度学习遇到的一系列bugVScode无法激活conda1.vscode加载web 视图报错2.CUDA out of memory3.voc2007数据集中的txt文件4.object has no attribute ‘cache‘5.KeyError:model6.No module named loguru7.Python AttributeError: module ‘distutils‘ has no a…

TensorFlow入门(五、指定GPU运算)

一般情况下,下载的TensorFlow版本如果是GPU版本,在运行过程中TensorFlow能自动检测。如果检测到GPU,TensorFlow会默认利用找到的第一个GPU来执行操作。如果机器上有超过一个可用的GPU,除第一个之外的其他GPU默认是不参与计算的。如果想让TensorFlow使用这些GPU执行操作,需要将运…

R语言学习笔记

R语言学习笔记 一.准备环境二.认识控制台三.R包四.数据结构1.向量Vector1.1创建向量1.2访问向量中的数据1.3向量的循环补齐 2.矩阵matrix2.1创建矩阵2.2访问矩阵中的数据 3数组Array3.1创建数组3.2访问数组中的数据 4.数据框Dataframe4.1创建数据框4.2访问数据框中的数据 5因子…

大数据Flink(八十六):DML:Group 聚合和Over 聚合

文章目录 DML:Group 聚合和Over 聚合 一、DML:Group 聚合