rsync远程同步+inotify监控

目录

一、Rsync 简介

1、rsync是什么

2、备份的方式

3、rsync同步方式

4、常用rsync命令

5、配置源的两种表达方法

二、rsync实验

1、本地复制

​编辑​编辑

2、异地复制

2.1  rsync服务器配置

2.2 rsync客户端配置

2.2.1 普通同步

2.2.2 免密同步

2.2.3 --delete选项的用法

3、发起端（客户端）配置 rsync+inotify

3.1 服务端配置

3.2 发起端配置

3.3 客户端验证

一、Rsync 简介

1、rsync是什么

  • 一个开源的快速备份工具，可以在不同主机之间镜像同步整个目录树，支持增量备份
  • 传输前执行压缩，因此非常适用于异地备份、镜像服务器等
  • 负责发起rsync同步操作的客户机称为发起端，而负责响应来自客户机的rsync同步操作的服务器称为同步源。在同步过程中，同步源负责提供文件的原始位置，发起端应对该位置具有读取权限。
  • 官方网站：https://rsync.samba.org/

2、备份的方式

1、发起端：负责rsync  同步操作的客户机叫做发起端，通知服务器我要备份你的数据
2、备份源：负责响应来自客户机rsync   同步操作的服务器叫做备份源，需要备份的服务器
3、服务端：运行rsyncd服务，一般来说，需要备份的服务器
4、客户端：存放备份数据

rsync复制时的原理

  • 首先将源文件和目标位置的文件对比，找出差异部分
  • 根据目标位置的文件与源文件差异的部分，进行一致性同步

3、rsync同步方式

①本地复制：首先是将源文件和目的位置文件对比找出差异，然后将源文件与目的位置的差异部分进行一致性同步。

②下行同步：客户端与服务端同步内容，可以理解为客户端从服务器上下载内容

③上行同步：服务端与客户端同步内容，可以理解为客户端将内容上传到服务器

4、常用rsync命令

基本格式：rsync [选项] 原始位置 目标位置

常用选项：

  • -v：显示同步过程的详细（verbose）信息。
  • -z：在传输文件时进行压缩（compress）。
  • -a：归档模式，保留文件的权限、属性等信息，等同于组合选项“-rlptgoD”。
  • --delete：删除目标位置有而原始位置没有的文件。
  • -r：递归模式，包含目录及子目录中的所有文件。
  • -l：对于符号链接文件仍然复制为符号链接文件。
  • -p：保留文件的权限标记。
  • -t：保留文件的时间标记。
  • -g：保留文件的属组标记（仅超级用户使用）。
  • -o：保留文件的属主标记（仅超级用户使用）。
  • -H：保留硬连接文件。
  • -A：保留 ACL 属性信息。
  • -D：保留设备文件及其他特殊文件。
  • --checksum：根据校验和（而不是文件大小、修改时间）来决定是否跳过文件。

5、配置源的两种表达方法

#格式一：
#用户名@主机地址::共享模块名
rsync -avz backuper@192.168.247.10::wwwroot /opt/#格式二：
#rsync://用户名@主机地址/共享模块名
rsync -avz rsync://backuper@192.168.247.10/wwwroot /opt/

二、rsync实验

1、本地复制

rsync -avz /abc /opt 
#复制整个abc目录rsync -avz /abc/ /opt 
#复制abc目录下的文件

2、异地复制

2.1  rsync服务器配置

 实验环境： 

192.168.247.20   服务端   
192.168.247.80   客户端   

#前提首先关闭防火墙和增强功能
systemctl stop firewalld
setenforce 0rpm -q rsync							#一般系统已默认安装rsync#建立/etc/rsyncd.conf 配置文件
vim /etc/rsyncd.conf				#添加以下配置项
uid = root
gid = root
use chroot = yes										#禁锢在源目录
address = 192.168.10.18								    #监听地址
port 873												#监听端口 tcp/udp 873，可通过cat /etc/services | grep rsync查看
log file = /var/log/rsyncd.log							#日志文件位置
pid file = /var/run/rsyncd.pid							#存放进程 ID 的文件位置
hosts allow = 192.168.10.0/24							#允许访问的客户机地址
dont compress = *.gz *.bz2 *.tgz *.zip *.rar *.z		#同步时不再压缩的文件类型[wwwroot]												#共享模块名称
path = /var/www/html									#源目录的实际路径
comment = Document Root of www.kgc.com
read only = yes											#是否为只读
auth users = backuper									#授权账户，多个账号以空格分隔
secrets file = /etc/rsyncd_users.db						#存放账户信息的数据文件#如采用匿名的方式，只要将其中的“auth users”和“secrets file”配置项去掉即可。
#为备份账户创建数据文件
vim /etc/rsyncd_users.db
backuper:123456				#无须建立同名系统用户chmod 600 /etc/rsyncd_users.db#启动 rsync 服务程序
rsync --daemon				#启动 rsync 服务，以独立监听服务的方式（守护进程）运行

创建共享文件，也就是源文件

mkdir -p /var/www/html
chmod +r /var/www/html
cd /var/www/html
echo "yudeqiang">ydq.txt
echo "zhouxingchi">zxc.txt

2.2 rsync客户端配置

2.2.1 普通同步

2.2.2 免密同步

vim /etc/server.pass
123chmod 600 /etc/server.pass
rsync -avz --password-file=/etc/server.pass ydq@20.0.0.55::wwwroot /abc

2.2.3 --delete选项的用法

rsync -avz -delete --password-file=/etc/server.pass backuper@192.168.247.20::wwwroot /abc

3、发起端（客户端）配置 rsync+inotify

将inotify机制与rsync工具相结合，可以实现触发式备份（实时同步），即只要原始位置的文档发生变化，则立即启动增量备份操作；否则处于静默等待状态。这样，就避免了按固定周期备份时存在的延迟性、周期过密等问题。
因为 inotify 通知机制由 Linux 内核提供，因此主要做本机监控，在触发式备份中应用时更适合上行同步。

3.1 服务端配置

1、修改rsync源服务器配置文件

vim /etc/rsyncd.conf
......
read only = no											#关闭只读，上行同步需要可以写kill $(cat /var/run/rsyncd.pid)
rsync --daemon	
netstat -anpt | grep rsyncchmod 777 /var/www/html/

2、调整 inotify 内核参数

#max_queue_events（监控事件队列，默认值为16384）、
#max_user_instances（最多监控实例数，默认值为128）、
#max_user_watches（每个实例最多监控文件数，默认值为8192）。当要监控的目录、文件数量较多或者变化较频繁时，建议加大这三个参数的值。#cat /proc/sys/fs/inotify/max_queued_events
#cat /proc/sys/fs/inotify/max_user_instances
#cat /proc/sys/fs/inotify/max_user_watchesvim /etc/sysctl.conf
fs.inotify.max_queued_events = 16384
fs.inotify.max_user_instances = 1024
fs.inotify.max_user_watches = 1048576sysctl -p

3.2 发起端配置

安装inotif安装包

编写触发同步脚本

脚本的目的就是时实监控、时实同步的功能

vim /opt/inotify.sh#!/bin/bash
INOTIFY_CMD="inotifywait -mrq -e create,delete,move,modify,attrib /abc"
RSYNC_CMD="rsync -azH --delete --password-file=/etc/server.pass /abc/ backuper@192.168.247.20::wwwroot"$INOTIFY_CMD | while read DIRECTORY EVENT FILE
doif [ $(pgrep rsync | wc -l) -le 0 ] ; then$RSYNC_CMDfi
done#脚本解释
先定义一个变量为监控这个目录中是否创建、删除、移动、修改、属性等信息的变化
再定义一个变量为rsync同步，将/abc中的目录中的信息同步到rsync服务器中的指定目录
再编写一个while循环，先执行监控变量，再执行while循环，
循环内容为，读取目录事件文件，如果rsync进程同步操作不存在，则执行同步操作的变量。

3.3 客户端验证

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.rhkb.cn/news/130666.html

如若内容造成侵权/违法违规/事实不符，请联系长河编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

Linux基础命令（示例代码 + 解释）

Linux基础命令（示例代码 + 解释）

查看目录下文件 ls [-a -l -h] [路径] -a（全部） -l（细节） -h（大小） ls ls / ls -a ls -l ls -h ls -alh ls -l -h -a ls -lah /切换目录 cd [路径] change di…
阅读更多...
使用 System.exit() 来优雅地终止 Spring Boot 项目

使用 System.exit() 来优雅地终止 Spring Boot 项目

😊 作者： 一恍过去 💖 主页： https://blog.csdn.net/zhuocailing3390 🎊 社区： Java技术栈交流 🎉 主题： 使用 System.exit() 来优雅地终止 Spring Boot 项目 ⏱️ 创作时间&am…
阅读更多...
IIS解析漏洞复现

IIS解析漏洞复现

文章目录 漏洞复现总结 漏洞复现 打开虚拟机，在C:\inetpub\wwwroot\8000_test目录下放一个phpinfo.php文件： 在服务器管理器中打开IIS管理器，选择处理映射程序： 点击添加模块映射： 配置映射模板，php文件…
阅读更多...
【猿灰灰赠书活动 - 06期】- 【计算机考研书单——408专属】

【猿灰灰赠书活动 - 06期】- 【计算机考研书单——408专属】

👨‍💻本文专栏：赠书活动专栏（为大家争取的福利，免费送书） 👨‍💻本文简述：博文为大家争取福利，与机械工业出版社合作进行送书活动 👨‍&#x1f…
阅读更多...
​消费盲返模式：一种让消费者和商家都受益的新型消费返利模式

​消费盲返模式：一种让消费者和商家都受益的新型消费返利模式

您是否想过，如果您的消费能够带来意想不到的回报，您会不会更愿意购买商品或服务呢？您是否想过，如果您的商品或服务能够吸引更多的消费者，并让他们成为您的忠实客户，您会不会更有动力经营您的业务呢&#xf…
阅读更多...
一百七十四、Hive——Hive动态分区表加载数据时需不需要指定分区名？

一百七十四、Hive——Hive动态分区表加载数据时需不需要指定分区名？

一、目的 在Hive的DWD层和DWS层建立动态分区表后，发现动态插入数据时可以指定分区名，也可以不指定分区名。因此，研究一下它们的区别以及使用场景，从而决定在项目的海豚调度HiveSQL的脚本里需不需要指定动态分区的分区名&#xff…
阅读更多...
【数据结构】长篇详解堆,堆的向上/向下调整算法,堆排序及TopK问题

【数据结构】长篇详解堆,堆的向上/向下调整算法,堆排序及TopK问题

文章目录 堆的概念性质图解 向上调整算法算法分析代码整体实现 向下调整算法算法分析整体代码实现 堆的接口实现初始化堆销毁堆插入元素删除元素打印元素判断是否为空取首元素实现堆 堆排序创建堆调整堆整合步骤 TopK问题 堆的概念 堆就是将一组数据所有元素按完全二叉树的顺序…
阅读更多...
记录一次Docker与Redis冲突

记录一次Docker与Redis冲突

✅作者简介：大家好，我是Leo，热爱Java后端开发者，一个想要与大家共同进步的男人😉😉 🍎个人主页：Leo的博客 💞当前专栏： 报错以及Bug ✨特色专栏： …
阅读更多...
避坑之路 —— 前后端 json 的注意问题

避坑之路 —— 前后端 json 的注意问题

当我们在进行开发项目的时候，在前后端需要进行数据之间的传输，那么就会需要到json。而json算是字符串中的一种 1.先说一下前端的, 其实这两种都是表示前端希望能收到后端json这样的数据格式，那么我们在后端就需要注意将数据进行转换为json进…
阅读更多...
深度学习模型复杂度分析大杂烩

深度学习模型复杂度分析大杂烩

深度学习模型复杂度分析大杂烩 时间复杂度和空间复杂度是衡量一个算法的两个重要指标,用于表示算法的最差状态所需的时间增长量和所需辅助空间. 在深度学习神经网络模型中我们也通过： 计算量/FLOPS（时间复杂度）即模型的运算次数 访存量/By…
阅读更多...
数据结构与算法基础-学习-34-基数排序（桶排序）

数据结构与算法基础-学习-34-基数排序（桶排序）

目录 一、基本思想 二、算法思路 1、个位排序 （1）分配 （2）收集 2、十分位排序 （1）分配 （2）收集 三、源码分享 1、InitMyBucket 2、DestroyMyBucket 3、ClearMyBucket 4、…
阅读更多...
软件测试/测试开发丨使用ChatGPT自动进行需求分析

软件测试/测试开发丨使用ChatGPT自动进行需求分析

简介 在实际工作过程中，常常需要拿到产品的PRD文档或者原型图进行需求分析，为产品的功能设计和优化提供建议。 而使用ChatGPT可以很好地帮助分析和整理用户需求。 实践演练 接下来，需要使用ChatGPT 辅助我们完成需求分析的任务 注意&…
阅读更多...
【论文笔记】Baidu Apollo EM Motion Planner

【论文笔记】Baidu Apollo EM Motion Planner

文章目录 AbstractI. INTRODUCTIONA. Multilane StrategyB. Path-Speed Iterative AlgorithmC. Decisions and Traffic Regulations II. EM PLANNER FRAMEWORK WITH MULTILANE STRATEGYIII. EM PLANNER AT LANE LEVELA. SL and ST Mapping (E-step)B. M-Step DP PathC. M-Step …
阅读更多...
01-Redis核心数据结构与高性能原理

01-Redis核心数据结构与高性能原理

上一篇： 1.Redis安装 下载地址：http://redis.io/download 安装步骤： # 安装gcc yum install gcc# 把下载好的redis-5.0.3.tar.gz放在/usr/local文件夹下，并解压 wget http://download.redis.io/releases/redis-5.0.3.tar.gz…
阅读更多...
【ArcGIS Pro二次开发】(67)：处理面要素空洞

【ArcGIS Pro二次开发】(67)：处理面要素空洞

这个一个简单的小功能。 有些面要素可能会存在空洞，这个工具的目的就是获取面要素的空洞，或者去除空洞获取要素的边界。 这个功能其实在之前做拓扑功能的时候就已经有了，这次只是单独把它提取出来。因为有时候会单独用到这个功能。 一、要实…
阅读更多...
面试半个月后的一些想法

面试半个月后的一些想法

源于半个月面试经历后的一些想法，刚开始想的是随便写写，没想到居然写了这么多。 找不到目标找不到意义亦或是烦躁的时候，就写写文章吧，把那些困扰你很久的问题铺开来 花时间仔细想想，其实真正让我们生气懊恼&#xff0…
阅读更多...
JS中应该注意的点

JS中应该注意的点

本帖子记录在使用前端时遇到的一些小点。 1.html()和text()和val()的使用及区别 1.1 val() val&#xff08;&#xff09;是对于单标签元素的值&#xff0c;其中一个很重要的特性是value"" Value:<input id"input" type"text" value"LO…
阅读更多...
MySQL高可用搭建方案之（MMM）

MySQL高可用搭建方案之（MMM）

有的时候博客内容会有变动&#xff0c;首发博客是最新的&#xff0c;其他博客地址可能会未同步,认准https://blog.zysicyj.top 注意&#xff1a;这篇转载文章&#xff0c;非原创 首发博客地址 原文地址 前言 MySQL的高可用有很多种&#xff0c;有我们经常说的MMM架构、MHA架构、…
阅读更多...
TGA格式文件转材质

TGA格式文件转材质

今天淘宝上买了一个美女的模型&#xff0c;是blender的源文件&#xff0c;上面说有fbx格式的。我用unity&#xff0c;所以觉得应该可以用。文件内容如下图&#xff1a; FBX文件夹打开后&#xff0c;内容如下图所示&#xff0c;当时就预感到可能没有色彩。 unity打开后果然发现只…
阅读更多...
笔记本选购指南

笔记本选购指南

大学生笔记本电脑选购指南 文章目录 笔记本分类指标排行 了解自身需求理工科文科艺术总结 参考指标品牌CPU显卡屏幕其他 购买渠道推荐游戏本Redmi G 锐龙版联想G5000惠普光影精灵9天选4锐龙版联想R7000P暗影精灵9联想拯救者R9000P 全能本华硕无畏PRO15联想小新Pro14 2023 轻薄本…
阅读更多...
最新文章
推荐文章

Copyright @ 2022~2023