利用rsync备份全网服务器数据

一、项目描述

某公司里有一台Web服务器，里面的数据很重要，但是如果硬盘坏了数据就会丢失，现在领导要求把数据做备份，这样Web服务器数据丢失在可以进行恢复，要求如下：

1、备份要求

每天晚上00点整在Web服务器上打包备份系统配置文件、网站程序目录及访问日志并通过rsync命令推送到Rsync备份服务器上备份保留。

2、备份思路

可以是先在本地按日期打包，然后再推送到Rsync备份服务器上；NFS存储服务器和Web服务器在实际工作中就是运维主要管理的全部服务器。

二、环境说明

需要三台服务器主机，其主机信息如下：

服务器说明主机名称IP地址
Nginx web服务器openEuler-1192.168.121.11
NFS存储服务器openEuler-2192.168.121.12
Rsync备份服务器openEuler-3192.168.121.12

三、项目备份需求

（1）所有服务器的备份目录必须都为/backup。
（2）要备份的系统配置文件包括但不限于：

  • 定时任务服务的配置文件（/var/spool/cron/root）  （适合Web和NFS服务器）。
  • 开机自启动的配置文件（/etc/rc.local）  （适合Web和NFS服务器）。
  • 日常脚本的目录  （/server/script）。

（3）Web服务器站点目录假定为/var/www/html/，如果没有，可以先模拟创建。
（4）Web服务器访问日志路径假定为/app/logs，如果没有，可以先模拟创建。
（5）Web服务器本地保留打包后的7天备份数据即可（本地留存不能多于7天，因为数据太多硬盘会满）。
（6）备份服务器BACKUP上，保留最近7天所有备份数据，保留6个月内每周一的所有数据副本。
（7）备份服务器上，要按照备份数据服务器内网IP为目录保存备份，备份的文件按照时间、名称保存。
（8）需要确保备份的数据尽量完整准确，在备份服务器上对备份的数据是否完整进行检查。
（9）备份服务器BACKUP上，每天早晨8:00把备份成功或失败结果信息发送到系统管理员邮箱里。

服务器说明备份目录目录说明备注
all server/backup备份目录统一服务器本地备份目录，便于管理
all server/var/spool/cron/root定时任务服务配置文件
all server/etc/rc.local开机自启动配置文件
all server/server/script日常脚本目录统一服务器本地脚本目录，便于管理
Web server/var/www/htmlweb服务器站点目录mkdir -p /var/www/html
Web server/app/logsweb服务器访问日志路径mkdir -p /app/logs

四、服务器的部署

（1）Rsync备份服务器搭建部署（openEuler-3）

  • rsync服务器搭建部署。

  • 开发脚本实现校验、删除、报警。

  • 配置实时任务每天6点实时执行。

（2）Web服务器搭建部署（openEuler-1）

  • 验证Rsync服务能否推送成功。

  • 开发脚本实现打包备份、推送、校验、删除。

  • 配置定时任务每天0点定时推送。

（3）NFS存储服务器搭建部署（openEuler-2）

  • 验证Rsync服务能否推送成功。

  • 开发脚本实现打包备份、推送、校验、删除。

  • 配置定时任务每天0点定时推送。

五、项目实施

1、在Rsync备份服务器上部署Rsync服务

# 安装rsync
[root@openEuler-3 ~]# yum install -y rsync# 配置文件
[root@openEuler-3 ~]# vim /etc/rsyncd.conf
[root@openEuler-3 ~]# cat /etc/rsyncd.conf
uid = rsync
gid = rsync
use chroot = no
max connections = 200
timeout = 300
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsync.lock
log file = /var/log/rsyncd.log
fake super = yes[backup]path = /backupignore errorsread only = falselist = falsehosts allow = 192.168.121.0/24hosts deny = 0.0.0.0/32auth users = rsync_backupsecrets file = /etc/rsync.password# 创建rsync账户及共享目录并修改目录属主为rsync
[root@openEuler-3 ~]# useradd -M -s /sbin/nologin rsync
[root@openEuler-3 ~]# mkdir /backup
[root@openEuler-3 ~]# chown -R rsync /backup# 启动服务
[root@openEuler-3 ~]# systemctl enable --now rsyncd
Created symlink /etc/systemd/system/multi-user.target.wants/rsyncd.service → /usr/lib/systemd/system/rsyncd.service.# 创建rsync虚拟账户名和密码,并赋予密码文件600权限
[root@openEuler-3 ~]# echo "rsync_backup:123456" > /etc/rsync.password
[root@openEuler-3 ~]# chmod 600 /etc/rsync.password

解读配置文件：

uid = rsync							# 用户
gid = rsync							# 组
use chroot = no						# 程序安全设置
max connections = 200				# 客户端连接数
timeout = 300						# 超时时间
pid file = /var/run/rsyncd.pid		# 进程号文件位置
lock file = /var/run/rsync.lock		# 进程锁
log file = /var/log/rsyncd.log		# 日志文件
fake super = yes 					# 无需rsync以root身份运行，允许接受数据[backup]path = /backup						# 目录ignore errors						# 有错误时忽略read only = false					# 可读可写list = false						# 阻止远程列表（不让通过远程方式看服务端有啥）hosts allow = 192.168.121.0/24		# 允许IPhosts deny = 0.0.0.0/32				# 禁止IPauth users = rsync_backup			# 虚拟用户secrets file = /etc/rsync.password	# 存放用户和密码的文件

2、web服务器，NFS 服务器本地打包备份脚本实现

# 安装rsync
[root@openEuler-3 ~]# yum install -y rsync# 创建rsync密码文件，方便脚本命令直接引用,并赋予密码文件600权限
[root@openEuler-3 ~]# echo "123456" > /etc/rsync.password
[root@openEuler-3 ~]# chmod 600 /etc/rsync.password# 模拟数据创建
[root@openEuler-1 script]# touch /var/www/html/{1..3}.txt
[root@openEuler-1 script]# mkdir -p /app/logs
[root@openEuler-1 script]# touch /app/logs/{a..c}.log# 编写备份脚本
[root@openEuler-1 script]# vim backup.sh
[root@openEuler-1 script]# cat backup.sh
#!/bin/bash
#########################
#File name:backup.sh
#Email:obboda@163.com
#Created time:2025-01-16 21:07:58
#Description:
#########################Date=$(date +%F)
Host_IP=$(ifconfig ens160 | awk '/inet /{print $2}')
Backup_Dir="/backup/"
Backup_Server_IP=192.168.121.13# 创建指定目录
[ ! -d $Backup_Dir/$Host_IP ] && mkdir -p $Backup_Dir/$Host_IP# 按要求打包备份所有本地重要文件
cd / &&\
tar cf ${Backup_Dir}${Host_IP}/sys_file_bak_${Date}_tar.gz var/spool/cron/root &&\
tar rf ${Backup_Dir}${Host_IP}/sys_file_bak_${Date}_tar.gz etc/rc.d/rc.local &&\
tar rf ${Backup_Dir}${Host_IP}/sys_file_bak_${Date}_tar.gz server/script/ &&\
tar zcf $Backup_Dir$Host_IP/www_${Date}_tar.gz var/www/html/ &&\
tar zcf $Backup_Dir$Host_IP/app_logs_${Date}_tar.gz app/logs/ &&\
# 提示：在NFS服务器客户端上不用编写压缩Web服务器的程序与日志目录# 给所有备份的压缩文件建立指纹，放入指纹库flag，后面会验证完整性
find ${Backup_Dir:-/tmp} -type f -name "*${Date}_tar.gz" |xargs md5sum >$Backup_Dir/$Host_IP/${Date}.flag# 把备份推送到备份服务器
rsync -az $Backup_Dir rsync_backup@${Backup_Server_IP}::backup --password-file=/etc/rsync.password# 删除7天以前的所有本地备份数据
find ${Backup_Dir:-/tmp} -type f -name "*.tar.gz" -a -name "*flag*" -mtime +7|xargs rm -f

3、配置定时任务

# web服务器（nfs服务器）：定时每天0：00执行备份脚本
[root@openEuler-1 script]# crontab -e
crontab: installing new crontab
[root@openEuler-1 script]# crontab -l
00 00 * * * /bin/sh /server/script/backup.sh &> /dev/null# 备份服务器：编辑服务端删除脚本文件
[root@openEuler-3 ~]# mkdir -p /server/script
[root@openEuler-3 ~]# cd /server/script/
[root@openEuler-3 script]# vim del_bak_data.sh
[root@openEuler-3 script]# cat del_bak_data.sh
#!/bin/bashBackup_Dir="/backup/"#删除7天前的压缩包和flag文件
find ${Backup_Dir:-/tmp} -type f  -name "*tar.gz*" -name "*flag*" -mtime +7|xargs rm -f# 备份服务器：配置定时任务
[root@openEuler-3 script]# crontab -e
crontab: installing new crontab
[root@openEuler-3 script]# crontab -l
00 00 * * * /bin/sh /server/script/del_bak_data.sh &>/dev/null

4、数据传输完整性验证与监控告警

# 备份服务器：针对备份时的md5指纹数据，利用MD5命令进行验证，完成数据传输过程完整性验证.
[root@openEuler-3 script]# vim send_mail.sh
[root@openEuler-3 script]# cat send_mail.sh
#!/bin/bash
Date=$(date +%F)
Backup_Dir="/backup/"
Check_Log="/tmp/bak.log_$(date +%F)"
Admin_Mail=obboda@163.comfind $Backup_Dir -type f -name "*.flag"|xargs md5sum -c >> $Check_Logif [ -s "$Check_Log" ]
thenmail -s "$Date backup data info" $Admin_Mail <$Check_Log
elseecho "$Date backup data error,pls check it." >$Check_Logmail -s "$Date backup data info" $Admin_Mail <$Check_Log
ficp $Check_Log{,.ori} && >$Check_Log

5、配置mail使用外部SMTP发邮件

# 安装mailx
[root@openEuler-3 script]# yum install -y mailx# 编辑/etc/mail.rc配置文件（在最后一行加入）
[root@openEuler-3 script]# vim /etc/mail.rc
[root@openEuler-3 script]# tail -n5 /etc/mail.rc
set from=obboda@163.com
set smtp=smtp.163.com
set smtp-auth-user=obboda@163.com
set smtp-auth-password=********        # 这里填写自己邮箱的授权码
set smtp-auth=login# 测试发送邮件
[root@openEuler-3 script]# echo "how are u?" | mail -s "HELLO!" obboda@163.com

6、最后测试

# 手动执行脚本进行测试
[root@openEuler-1 script]# bash backup.sh# 查看备份
[root@openEuler-3 script]# tree /backup/192.168.121.11/
/backup/192.168.121.11/
├── 2025-01-16.flag
├── app_logs_2025-01-16_tar.gz
├── sys_file_bak_2025-01-16_tar.gz
└── www_2025-01-16_tar.gz# 查看校验结果
[root@openEuler-3 script]# bash send_mail.sh

校验结果：

测试成功！！

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.rhkb.cn/news/4483.html

如若内容造成侵权/违法违规/事实不符，请联系长河编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

Mysql 主从复制原理及其工作过程，配置一主两从实验

Mysql 主从复制原理及其工作过程，配置一主两从实验

主从原理&#xff1a;MySQL 主从同步是一种数据库复制技术&#xff0c;它通过将主服务器上的数据更改复制到一个或多个从服务器&#xff0c;实现数据的自动同步。 主从同步的核心原理是将主服务器上的二进制日志复制到从服务器&#xff0c;并在从服务器上执行这些日志中的操作…
阅读更多...
Ubuntu 24.04 LTS 空闲硬盘挂载到 文件管理器的 other locations

Ubuntu 24.04 LTS 空闲硬盘挂载到 文件管理器的 other locations

Ubuntu 24.04 LTS 确认硬盘是否被识别 使用 lsblk 查看信息&#xff0c;其中sda这个盘是我找不到的&#xff0c;途中是挂在好的。 分区和格式化硬盘 如果新硬盘没有分区&#xff0c;你需要先分区并格式化它。假设新硬盘为 /dev/sdb&#xff0c;使用 fdisk 或 parted 对硬盘…
阅读更多...
调试Hadoop源代码

调试Hadoop源代码

个人博客地址&#xff1a;调试Hadoop源代码 | 一张假钞的真实世界 Hadoop版本 Hadoop 2.7.3 调试模式下启动Hadoop NameNode 在${HADOOP_HOME}/etc/hadoop/hadoop-env.sh中设置NameNode启动的JVM参数&#xff0c;如下&#xff1a; export HADOOP_NAMENODE_OPTS"-Xdeb…
阅读更多...
JSON-stringify和parse

JSON-stringify和parse

目录 JSON序列化 JSON反序列化 序列化和反序列化转换 深拷贝 JSON.parse接受参数类型错误导致抛出异常 当有子元素的时候&#xff0c;设置父元素样式的方式 防抖问题 JSON序列化 const obj {name: "John",age: 30,city: "New York",};// 基本用法&…
阅读更多...
3 前端（中）：JavaScript

3 前端（中）：JavaScript

文章目录 前言&#xff1a;JavaScript简介一、ECMAscript&#xff08;JavaScript基本语法&#xff09;1 JavaScript与html结合方式&#xff08;快速入门&#xff09;2 基本知识&#xff08;1&#xff09;JavaScript注释&#xff08;和Java注释一样&#xff09;&#xff08;2&am…
阅读更多...
服务器一次性部署One API + ChatGPT-Next-Web

服务器一次性部署One API + ChatGPT-Next-Web

服务器一次性部署One API ChatGPT-Next-Web One API ChatGPT-Next-Web 介绍One APIChatGPT-Next-Web docker-compose 部署One API ChatGPT-Next-WebOpen API docker-compose 配置ChatGPT-Next-Web docker-compose 配置docker-compose 启动容器 后续配置 同步发布在个人笔记服…
阅读更多...
OSI七层协议——分层网络协议

OSI七层协议——分层网络协议

OSI七层协议&#xff0c;顾名思义&#xff0c;分为七层&#xff0c;实际上七层是不存在的&#xff0c;是人为的进行划分,让人更好的理解 七层协议包括&#xff0c;物理层(我),数据链路层(据),网络层(网),传输层(传输),会话层(会),表示层(表),应用层(用)(记忆口诀->我会用表…
阅读更多...
【AI论文】生成式视频模型是否通过观看视频学习物理原理？

【AI论文】生成式视频模型是否通过观看视频学习物理原理？

摘要&#xff1a;AI视频生成领域正经历一场革命&#xff0c;其质量和真实感在迅速提升。这些进步引发了一场激烈的科学辩论&#xff1a;视频模型是否学习了能够发现物理定律的“世界模型”&#xff0c;或者&#xff0c;它们仅仅是复杂的像素预测器&#xff0c;能够在不理解现实…
阅读更多...
【TCP】rfc文档

【TCP】rfc文档

tcp协议相关rfc有哪些 TCP&#xff08;传输控制协议&#xff09;是一个复杂的协议&#xff0c;其设计和实现涉及多个RFC文档。以下是一些与TCP协议密切相关的RFC文档列表&#xff0c;按照时间顺序排列&#xff0c;涵盖了从基础定义到高级特性和优化的各个方面&#xff1a; 基…
阅读更多...
VLAN基础理论

VLAN基础理论

VLAN V&#xff1a;Virtual(虚拟) LAN ——局域网 VLAN ——虚拟局域网(虚拟广播域&#xff1a;交换机和路由器协同工作后&#xff0c;将原来的一个广播域&#xff0c;逻辑上切分为多个。) VLAN的配置我们基于以下拓扑进行&#xff1a; PC1-4的IP地址依次为192.168.1.1-192.168…
阅读更多...
RabbitMQ实现延迟消息发送——实战篇

RabbitMQ实现延迟消息发送——实战篇

在项目中&#xff0c;我们经常需要使用消息队列来实现延迟任务&#xff0c;本篇文章就向各位介绍使用RabbitMQ如何实现延迟消息发送&#xff0c;由于是实战篇&#xff0c;所以不会讲太多理论的知识&#xff0c;还不太理解的可以先看看MQ的延迟消息的一个实现原理再来看这篇文章…
阅读更多...
IoTDB 常见问题 QA 第四期

IoTDB 常见问题 QA 第四期

关于 IoTDB 的 Q & A IoTDB Q&A 第四期来啦&#xff01;我们将定期汇总我们将定期汇总社区讨论频繁的问题&#xff0c;并展开进行详细回答&#xff0c;通过积累常见问题“小百科”&#xff0c;方便大家使用 IoTDB。 Q1&#xff1a;Java 中如何使用 SSL 连接 IoTDB 问题…
阅读更多...
【STM32-学习笔记-14-】FLASH闪存

【STM32-学习笔记-14-】FLASH闪存

文章目录 FALSH闪存一、FLASH简介二、FLASH基本结构三、FLASH解锁四、使用指针访问存储器五、FLASH擦除以及编程流程Ⅰ、程序存储器全擦除1. 读取FLASH_CR的LOCK位2. 检查LOCK位是否为13. 设置FLASH_CR的MER 1和STRT 1&#xff08;如果LOCK位0&#xff09;4. 检查FLASH_SR的B…
阅读更多...
CamemBERT：一款出色的法语语言模型

CamemBERT：一款出色的法语语言模型

摘要 预训练语言模型在自然语言处理中已无处不在。尽管这些模型取得了成功&#xff0c;但大多数可用模型要么是在英语数据上训练的&#xff0c;要么是在多种语言数据拼接的基础上训练的。这使得这些模型在除英语以外的所有语言中的实际应用非常有限。本文探讨了为其他语言训练…
阅读更多...
线性代数概述

线性代数概述

矩阵与线性代数的关系 矩阵是线性代数的研究对象之一&#xff1a; 矩阵&#xff08;Matrix&#xff09;是一个按照长方阵列排列的复数或实数集合&#xff0c;是线性代数中的核心概念之一。矩阵的定义和性质构成了线性代数中矩阵理论的基础&#xff0c;而矩阵运算则简洁地表示和…
阅读更多...
金仓Kingbase客户端KStudio报OOM：Java heap space socketTimeout

金仓Kingbase客户端KStudio报OOM：Java heap space socketTimeout

找到Kingbase\ES\V8\KESRealPro\V008R006C006B0021\ClientTools\guitools\KStudio\KStudio.ini 修改JVM参数&#xff1a; 默认值&#xff1a; -Xms512m -Xmx1024m 改为&#xff1a; -Xms1024m -Xmx2048m -XX:MaxPermSize512m SQL查询报错&#xff1a;An I/O error occurred …
阅读更多...
Spring6.0新特性-HTTP接口：使用@HttpExchange实现更优雅的Http客户端

Spring6.0新特性-HTTP接口：使用@HttpExchange实现更优雅的Http客户端

文章目录 一、概述二、使用1、创建接口HttpExchange方法2、创建一个在调用方法时执行请求的代理3、方法参数4、返回值5、错误处理&#xff08;1&#xff09;为RestClient&#xff08;2&#xff09;为WebClient&#xff08;3&#xff09;为RestTemplate 注意 一、概述 官方文档…
阅读更多...
kubernetes学习-Service（七）

kubernetes学习-Service（七）

一、Service-pod-endpoint关系 # 查看endpoints [rootk8s-master deployments]# kubectl get endpoints NAME ENDPOINTS AGE kubernetes 192.168.129.136:6443 90m nginx-svc 10.109.131.1:80,10.111.156.65:80 22m # …
阅读更多...
Python数据分析案例70——基于神经网络的时间序列预测(滞后性的效果，预测中存在的问题)

Python数据分析案例70——基于神经网络的时间序列预测(滞后性的效果，预测中存在的问题)

背景 这篇文章可以说是基于 现代的一些神经网络的方法去做时间序列预测的一个介绍科普&#xff0c;也可以说是一个各种模型对比的案例&#xff0c;但也会谈一谈自己做了这么久关于神经网络的时间序列预测的论文&#xff0c;其中一些常见的模式及它们存在的问题以及效果&#x…
阅读更多...
opencv笔记2

opencv笔记2

图像灰度 彩色图像转化为灰度图像的过程是图像的灰度化处理。彩色图像中的每个像素的颜色由R&#xff0c;G&#xff0c;B三个分量决定&#xff0c;而每个分量中可取值0-255&#xff0c;这样一个像素点可以有256*256*256变化。而灰度图像是R&#xff0c;G&#xff0c;B三个分量…
阅读更多...
最新文章
推荐文章

Copyright @ 2022~2023